JP2003190160A - Ultrasonic imaging system - Google Patents

Ultrasonic imaging system

Info

Publication number
JP2003190160A
JP2003190160A JP2001377039A JP2001377039A JP2003190160A JP 2003190160 A JP2003190160 A JP 2003190160A JP 2001377039 A JP2001377039 A JP 2001377039A JP 2001377039 A JP2001377039 A JP 2001377039A JP 2003190160 A JP2003190160 A JP 2003190160A
Authority
JP
Japan
Prior art keywords
azimuth
time
scanning
dimensional
matrix
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001377039A
Other languages
Japanese (ja)
Other versions
JP3808760B2 (en
Inventor
Hiroshi Hashimoto
浩 橋本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GE Medical Systems Global Technology Co LLC
Original Assignee
GE Medical Systems Global Technology Co LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GE Medical Systems Global Technology Co LLC filed Critical GE Medical Systems Global Technology Co LLC
Priority to JP2001377039A priority Critical patent/JP3808760B2/en
Publication of JP2003190160A publication Critical patent/JP2003190160A/en
Application granted granted Critical
Publication of JP3808760B2 publication Critical patent/JP3808760B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N29/00Investigating or analysing materials by the use of ultrasonic, sonic or infrasonic waves; Visualisation of the interior of objects by transmitting ultrasonic or sonic waves through the object
    • G01N29/04Analysing solids
    • G01N29/06Visualisation of the interior, e.g. acoustic microscopy
    • G01N29/0609Display arrangements, e.g. colour displays
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/52017Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 particularly adapted to short-range imaging
    • G01S7/52085Details related to the ultrasound signal acquisition, e.g. scan sequences

Abstract

<P>PROBLEM TO BE SOLVED: To provide an ultrasonic imaging system for performing three- dimensional (3D) imaging in which a sound ray density, a frame rate and an imaging are practical. <P>SOLUTION: This system has transmitting/receiving means (33, 36 and 48) for successively sending ultrasonic waves in a plurality of azimuths by repeating a skip scan in the azimuth of a two-dimensional (2D) azimuth matrix and for performing a scan in the azimuth not overlapped with the last scan each time the skip scan is repeated, a signal generating means (44) for generating the virtually received signal of the present time in the skipped azimuth by correcting the received signals in the past in the skipped azimuth corresponding to the quantity of a change from the last signal received in the scan azimuth of the present time for each of skip scans, and an image generating means (44) for generating a 3D image on the basis of the received signal in the scan azimuth of the present time and the virtual received signal. <P>COPYRIGHT: (C)2003,JPO

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【発明の属する技術分野】本発明は超音波撮影装置に関
し、とくに、3次元画像を撮影する超音波撮影装置に関
する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an ultrasonic imaging apparatus, and more particularly to an ultrasonic imaging apparatus for taking a three-dimensional image.

【0002】[0002]

【従来の技術】3次元画像を撮影する超音波撮影装置
は、2次元方位マトリクス(matrix)として設定
された複数の方位に対して順次に超音波を送波してエコ
ー(echo)を受信し、エコー受信信号に基づいて3
次元画像を生成する。
2. Description of the Related Art An ultrasonic imaging apparatus for capturing a three-dimensional image sequentially transmits ultrasonic waves to a plurality of orientations set as a two-dimensional orientation matrix (matrix) and receives echoes (echo). , 3 based on echo received signal
Generate a three-dimensional image.

【0003】[0003]

【発明が解決しようとする課題】生体内での音速は約1
500m/sであるから、深さ方向の撮影範囲を例えば
150mmとした場合、1秒間に可能な送受信回数は最
大で約5000回となる。撮影のフレームレート(fr
ame rate)を例えば10フレーム/sとする
と、1フレームあたりの送受信回数は約500回とな
る。この回数で3次元撮影を行うとしたとき、2次元方
位マトリクスのサイズ(size)は概ね22×22と
なる。この方位マトリクスサイズで立体角が例えば60
゜程度の3次元領域を撮影した場合、3次元画像は方位
分解能すなわち音線密度が粗くなって実用に耐えない。
The speed of sound in a living body is about 1
Since it is 500 m / s, when the imaging range in the depth direction is set to, for example, 150 mm, the maximum number of times of transmission / reception allowed per second is about 5000 times. Shooting frame rate (fr
If the average rate is set to 10 frames / s, the number of times of transmission / reception per frame is about 500 times. When three-dimensional imaging is performed with this number of times, the size (size) of the two-dimensional orientation matrix is approximately 22 × 22. With this azimuth matrix size, the solid angle is, for example, 60
When a three-dimensional region of about 3 ° is photographed, the three-dimensional image has a poor lateral resolution, that is, a sound ray density, and is not practical.

【0004】したがって、実用的な音線密度にしようと
すれば、フレームレートまたは撮影範囲を非実用的なま
でに小さくしなければならない。すなわち、音線密度、
フレームレートおよび撮影範囲のすべてを実用的のもの
にすることはできなかった。
Therefore, in order to obtain a practical sound ray density, the frame rate or the photographing range must be reduced to an impractical level. That is, the sound ray density,
It was not possible to make all of the frame rate and shooting range practical.

【0005】そこで、本発明の課題は、音線密度、フレ
ームレートおよび撮影範囲が実用的な3次元撮影を行う
超音波撮影装置を実現することである。
Therefore, an object of the present invention is to realize an ultrasonic imaging apparatus for three-dimensional imaging in which the sound ray density, the frame rate and the imaging range are practical.

【0006】[0006]

【課題を解決するための手段】(1)上記の課題を解決
するためのひとつの観点での発明は、複数の方位に順次
に超音波を送波してエコーを受信することを2次元方位
マトリクスにおける方位の飛び越し走査の繰り返しによ
って行うとともに、飛び越し走査の繰り返しのたびに前
回とは重複しない方位を走査する送受信手段と、前記エ
コーの受信信号に基づいて3次元画像を生成する画像生
成手段と、を具備することを特徴とする超音波撮影装置
である。
(1) In one aspect of the invention for solving the above-mentioned problems, an ultrasonic wave is sequentially transmitted to a plurality of directions to receive an echo. A transmission / reception unit that performs interlaced scanning of the directions in the matrix and scans a direction that does not overlap with the previous time each time the interlaced scanning is repeated, and an image generation unit that generates a three-dimensional image based on the received signal of the echo. An ultrasonic imaging apparatus comprising:

【0007】(1)に記載の観点での発明では、複数の
方位に順次に超音波を送波してエコーを受信することを
2次元方位マトリクスにおける方位の飛び越し走査の繰
り返しによって行うとともに、飛び越し走査の繰り返し
のたびに前回とは重複しない方位を走査するので、フレ
ームレートを高めるとともに、方位のインターレースに
より音線密度を高めたのと同等の結果を得ることができ
る。
In the invention according to the aspect (1), ultrasonic waves are sequentially transmitted to a plurality of azimuths and echoes are received by repeating interlace scanning of the azimuths in the two-dimensional azimuth matrix, and interlacing is performed. Since the azimuth that does not overlap with the previous one is scanned each time the scanning is repeated, it is possible to obtain the same result as that when the frame rate is increased and the sound ray density is increased by interlacing the azimuths.

【0008】(2)上記の課題を解決するための他の観
点での発明は、複数の方位に順次に超音波を送波してエ
コーを受信することを2次元方位マトリクスにおける方
位の飛び越し走査の繰り返しによって行うとともに、飛
び越し走査の繰り返しのたびに前回とは重複しない方位
を走査する送受信手段と、前記飛び越し走査の各回ごと
に、飛び越した方位における過去の回の受信信号を今回
走査した方位における受信信号の前回からの変化量に応
じて補正することによって、飛び越した方位における今
回の仮想的な受信信号を生成する信号生成手段と、前記
飛び越し走査の各回ごとに、今回走査した方位における
受信信号および前記仮想的な受信信号に基づいて3次元
画像を生成する画像生成手段と、を具備することを特徴
とする超音波撮影装置である。
(2) In another aspect of the invention for solving the above-mentioned problems, an interlaced scanning of azimuths in a two-dimensional azimuth matrix is performed by sequentially transmitting ultrasonic waves to a plurality of azimuths and receiving echoes. And the transmitting and receiving means for scanning an azimuth that does not overlap with the previous time each time the interlaced scanning is repeated, and each time the interlaced scanning is performed, the received signal of the past time in the interlaced azimuth is scanned in the azimuth. By correcting according to the amount of change of the received signal from the previous time, a signal generation means for generating a virtual received signal of this time in the jumped azimuth, and a received signal in the azimuth scanned this time for each time of the interlaced scanning. And an image generation unit that generates a three-dimensional image based on the virtual received signal. It is the location.

【0009】(2)に記載の観点での発明では、(1)
に加えて、飛び越し走査の各回ごとに、飛び越した方位
における過去の回の受信信号を今回走査した方位におけ
る受信信号の前回からの変化量に応じて補正することに
よって、飛び越した方位における今回の仮想的な受信信
号を生成し、今回走査した方位における受信信号および
仮想的な受信信号に基づいて3次元画像を生成するの
で、3次元画像の音線密度を高めることができる。
According to the invention described in (2), (1)
In addition, for each interlaced scan, the received signal of the past time in the interlaced direction is corrected according to the amount of change in the received signal in the direction scanned this time from the previous time, so Since a three-dimensional image is generated based on the received signal in the direction scanned this time and the virtual received signal, the sound ray density of the three-dimensional image can be increased.

【0010】(3)上記の課題を解決するための他の観
点での発明は、複数の方位に順次に超音波を送波してエ
コーを受信することを2次元方位マトリクスにおける方
位の飛び越し走査の繰り返しによって行うとともに、飛
び越し走査の繰り返しのたびに前回とは重複しない方位
を走査する送受信手段と、前記飛び越し走査の各回ごと
に、今回走査した方位における受信信号からの補間演算
によって、飛び越した方位における今回の仮想的な受信
信号を生成する信号生成手段と、前記飛び越し走査の各
回ごとに、今回走査した方位における受信信号および前
記仮想的な受信信号に基づいて3次元画像を生成する画
像生成手段と、を具備することを特徴とする超音波撮影
装置である。
(3) In another aspect of the invention for solving the above-mentioned problems, an ultrasonic interlaced scanning in a two-dimensional azimuth matrix is performed by sequentially transmitting ultrasonic waves to a plurality of azimuths and receiving echoes. And the transmitting and receiving means for scanning the azimuth that does not overlap with the previous time each time the interlaced scanning is repeated, and the interlaced azimuth by the interpolation calculation from the received signal in the azimuth scanned this time for each of the interlaced scanning. And a signal generation means for generating a three-dimensional image based on the received signal in the direction scanned this time and the virtual received signal for each time of the interlaced scanning. And an ultrasonic imaging apparatus.

【0011】(3)に記載の観点での発明では、(1)
に加えて、飛び越し走査の各回ごとに、今回走査した方
位における受信信号からの補間演算によって、飛び越し
た方位における今回の仮想的な受信信号を生成し、今回
走査した方位における受信信号および仮想的な受信信号
に基づいて3次元画像を生成するので、3次元画像の音
線密度を高めることができる。
According to the invention described in (3), (1)
In addition to this, for each interlaced scan, a virtual received signal of this time in the jumped azimuth is generated by interpolation calculation from the received signal in the azimuth scanned this time, and the received signal in the azimuth scanned this time and the virtual Since the three-dimensional image is generated based on the received signal, the sound ray density of the three-dimensional image can be increased.

【0012】(4)上記の課題を解決するための他の観
点での発明は、複数の方位に順次に超音波を送波してエ
コーを受信することを2次元方位マトリクスにおける方
位の飛び越し走査の繰り返しによって行うとともに、飛
び越し走査の繰り返しのたびに前回とは重複しない方位
を走査する送受信手段と、前記飛び越し走査の各回ごと
に、飛び越した方位における過去の回の受信信号で代用
することによって、飛び越した方位における今回の仮想
的な受信信号を生成する信号生成手段と、前記飛び越し
走査の各回ごとに、今回走査した方位における受信信号
および前記仮想的な受信信号に基づいて3次元画像を生
成する画像生成手段と、を具備することを特徴とする超
音波撮影装置である。
(4) In another aspect of the invention for solving the above-mentioned problems, an ultrasonic interlaced scanning in a two-dimensional azimuth matrix is performed by sequentially transmitting ultrasonic waves to a plurality of azimuths and receiving echoes. While performing by repeating, the transmitting and receiving means for scanning the azimuth that does not overlap with the previous time each time the interlaced scanning is repeated, and each time of the interlaced scanning, by substituting the received signal of the past times in the interlaced azimuth, A signal generation unit that generates a virtual reception signal of this time in the jumped azimuth, and a three-dimensional image is generated for each of the interlaced scans based on the reception signal in the azimuth scanned this time and the virtual reception signal. An ultrasonic imaging apparatus, comprising: an image generating unit.

【0013】(4)に記載の観点での発明では、(1)
に加えて、飛び越し走査の各回ごとに、飛び越した方位
における過去の回の受信信号で代用することによって、
飛び越した方位における今回の仮想的な受信信号を生成
し、今回走査した方位における受信信号および仮想的な
受信信号に基づいて3次元画像を生成するので、3次元
画像の音線密度を高めることができる。
According to the invention described in (4), (1)
In addition, by substituting the received signals of the past times in the jumped direction for each interlaced scanning,
Since the virtual reception signal of this time in the jumped direction is generated and the three-dimensional image is generated based on the reception signal in the direction scanned this time and the virtual reception signal, it is possible to increase the sound ray density of the three-dimensional image. it can.

【0014】(5)上記の課題を解決するための他の観
点での発明は、複数の方位に順次に超音波を送波してエ
コーを受信することを2次元方位マトリクスにおける方
位の飛び越し走査の繰り返しによって行うとともに、飛
び越し走査の繰り返しのたびに前回とは重複しない方位
を走査する送受信手段と、前記飛び越し走査の各回ごと
に、今回走査した方位における受信信号のうち最寄りの
方位の受信信号で代用することによって、飛び越した方
位における今回の仮想的な受信信号を生成する信号生成
手段と、前記飛び越し走査の各回ごとに、今回走査した
方位における受信信号および前記仮想的な受信信号に基
づいて3次元画像を生成する画像生成手段と、を具備す
ることを特徴とする超音波撮影装置である。
(5) In another aspect of the invention for solving the above-mentioned problems, an ultrasonic interlaced scanning in a two-dimensional azimuth matrix is performed by sequentially transmitting ultrasonic waves to a plurality of azimuths and receiving echoes. And the receiving and transmitting means for scanning the azimuth that does not overlap with the previous time each time the interlaced scanning is repeated, and the received signal of the nearest azimuth among the received signals in the azimuth scanned this time for each of the interlaced scanning. By substituting, the signal generation means for generating the virtual reception signal of this time in the jumped azimuth, and 3 for each time of the interlaced scanning based on the reception signal in the azimuth scanned this time and the virtual reception signal. An ultrasonic imaging apparatus, comprising: an image generating unit that generates a three-dimensional image.

【0015】(5)に記載の観点での発明では、(1)
に加えて、飛び越し走査の各回ごとに、今回走査した方
位における受信信号のうち最寄りの方位の受信信号で代
用することによって、飛び越した方位における今回の仮
想的な受信信号を生成し、今回走査した方位における受
信信号および仮想的な受信信号に基づいて3次元画像を
生成するので、3次元画像の音線密度を高めることがで
きる。
According to the invention described in (5), (1)
In addition, for each interlaced scan, the received signal of the closest azimuth is substituted for the received signal in the azimuth scanned this time to generate the virtual received signal of this azimuth in the azimuth jumped and scanned this time. Since the three-dimensional image is generated based on the received signal in the azimuth and the virtual received signal, the sound ray density of the three-dimensional image can be increased.

【0016】前記送受信手段は前記飛び越しを予め定め
られた方位間隔で行うことが、走査に規則性を持たせる
点で好ましい。前記方位間隔は等間隔あるいは非等間隔
のいずれでもよい。
It is preferable that the transmitting / receiving means performs the interlacing at a predetermined azimuth interval in order to make scanning regular. The azimuth intervals may be equal intervals or unequal intervals.

【0017】[0017]

【発明の実施の形態】以下、図面を参照して本発明の実
施の形態を詳細に説明する。なお、本発明は実施の形態
に限定されるものではない。図1に超音波撮影装置のブ
ロック(block)図を示す。本装置は本発明の実施
の形態の一例である。本装置の構成によって、本発明の
装置に関する実施の形態の一例が示される。
BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. The present invention is not limited to the embodiment. FIG. 1 shows a block diagram of the ultrasonic imaging apparatus. This device is an example of an embodiment of the present invention. The configuration of this device shows an example of an embodiment relating to the device of the present invention.

【0018】同図に示すように、本装置は超音波プロー
ブ33を有する。超音波プローブ33は使用者により対
象7の体表に押し当てて使用される。超音波プローブ3
3は、例えば、図2に示すような超音波トランスデュー
サアレイ(transducer array)300
を有する。超音波トランスデューサアレイ300は2次
元アレイであり、例えば、32x32の正方マトリクス
をなす1024個の超音波振動子302からなる。な
お、2次元アレイは正方マトリクスに限るものではな
く、例えば32x16等の異方マトリクスであってよ
い。超音波振動子302は例えばPZT(チタン(T
i)酸ジルコン(Zr)酸鉛)セラミックス(cera
mics)等の圧電材料によって構成される。
As shown in the figure, this device has an ultrasonic probe 33. The ultrasonic probe 33 is used by being pressed against the body surface of the target 7 by the user. Ultrasonic probe 3
3 is an ultrasonic transducer array (transducer array) 300 as shown in FIG. 2, for example.
Have. The ultrasonic transducer array 300 is a two-dimensional array and includes, for example, 1024 ultrasonic transducers 302 forming a 32 × 32 square matrix. The two-dimensional array is not limited to the square matrix, but may be an anisotropic matrix such as 32 × 16. The ultrasonic transducer 302 is, for example, PZT (titanium (T
i) Zirconate (Zr) lead) ceramics (cera
mics) or other piezoelectric material.

【0019】超音波プローブ33は送受信部36に接続
されている。送受信部36は、超音波プローブ33に駆
動信号を与えて超音波を送波させる。送受信部36は、
また、超音波プローブ33が受波したエコー信号を受信
する。超音波プローブ33および送受信部36からなる
部分は、本発明における送受信手段の実施の形態の一例
である。
The ultrasonic probe 33 is connected to the transmitting / receiving section 36. The transmission / reception unit 36 gives a drive signal to the ultrasonic probe 33 to transmit an ultrasonic wave. The transmitter / receiver 36
Also, the echo signal received by the ultrasonic probe 33 is received. The portion including the ultrasonic probe 33 and the transmission / reception unit 36 is an example of the embodiment of the transmission / reception means in the present invention.

【0020】送受信部36は、例えば図3に示すような
走査を行う。すなわち、超音波トランスデューサアレイ
300の中央を頂点とするコーン(cone)状の撮影
範囲を超音波ビーム(beam)303により角度θ方
向および角度φ方向に走査して3次元走査を行う。な
お、超音波ビーム303の長さ方向をz方向とする。z
方向は撮影の深さ方向でもある。θ方向およびφ方向は
互いに垂直な2方向である。このような3次元走査はピ
ラミッドスキャン(Pyramidal scan)と
も呼ばれる。
The transmission / reception unit 36 performs scanning as shown in FIG. 3, for example. That is, three-dimensional scanning is performed by scanning a cone-shaped imaging range having the center of the ultrasonic transducer array 300 as an apex with the ultrasonic beam (beam) 303 in the angle θ direction and the angle φ direction. Note that the length direction of the ultrasonic beam 303 is the z direction. z
The direction is also the depth direction of the shooting. The θ direction and the φ direction are two directions perpendicular to each other. Such a three-dimensional scan is also called a pyramid scan.

【0021】図4に、他の方式の超音波撮影装置のブロ
ック図を示す。本装置は本発明の実施の形態の一例であ
る。本装置の構成によって、本発明の装置に関する実施
の形態の一例が示される。
FIG. 4 is a block diagram of another type of ultrasonic imaging apparatus. This device is an example of an embodiment of the present invention. The configuration of this device shows an example of an embodiment relating to the device of the present invention.

【0022】同図に示すように、本装置は超音波プロー
ブ33’を有する。超音波プローブ33’は使用者によ
り対象7の体表に押し当てて使用される。超音波プロー
ブ33’は、例えば、図5に示すような超音波トランス
デューサアレイ300’を有する。超音波トランスデュ
ーサアレイ300’は1次元アレイであり、例えば12
8個の超音波振動子302’からなる。超音波振動子3
02’は例えばPZT等の圧電材料によって構成され
る。
As shown in the figure, this device has an ultrasonic probe 33 '. The ultrasonic probe 33 'is used by being pressed against the body surface of the target 7 by the user. The ultrasonic probe 33 'has, for example, an ultrasonic transducer array 300' as shown in FIG. The ultrasonic transducer array 300 ′ is a one-dimensional array, for example, 12
It consists of eight ultrasonic transducers 302 '. Ultrasonic transducer 3
02 'is made of a piezoelectric material such as PZT.

【0023】超音波プローブ33’は送受信部36’に
接続されている。送受信部36’は、超音波プローブ3
3’に駆動信号を与えて超音波を送波させる。送受信部
36’は、また、超音波プローブ33’が受波したエコ
ー信号を受信する。
The ultrasonic probe 33 'is connected to the transmitting / receiving section 36'. The transmission / reception unit 36 'includes the ultrasonic probe 3
A drive signal is given to 3'to transmit ultrasonic waves. The transceiver unit 36 'also receives the echo signal received by the ultrasonic probe 33'.

【0024】送受信部36’は、例えば図6に示すよう
な走査を行う。すなわち、放射点200からz方向に進
行する超音波ビームすなわち音線202で扇状の2次元
領域206をθ方向に走査し、いわゆるセクタスキャン
(sector scan)を行う。
The transmitter / receiver 36 'performs scanning as shown in FIG. 6, for example. That is, a so-called sector scan is performed by scanning the fan-shaped two-dimensional region 206 in the θ direction with the ultrasonic beam that propagates in the z direction from the radiation point 200, that is, the sound ray 202.

【0025】送波および受波のアパーチャ(apert
ure)を超音波トランスデューサアレイの一部を用い
て形成するときは、このアパーチャをアレイに沿って順
次移動させることにより、例えば図7に示すような走査
を行うことができる。すなわち、放射点200からz方
向に発する音線202を直線状の軌跡204に沿って平
行移動させることにより、矩形状の2次元領域206を
x方向に走査し、いわゆるリニアスキャン(linea
r scan)を行う。
Transmit and receive apertures
ure) is formed by using a part of the ultrasonic transducer array, by sequentially moving the aperture along the array, for example, scanning as shown in FIG. 7 can be performed. That is, the sound ray 202 emitted in the z direction from the radiating point 200 is moved in parallel along the linear locus 204 to scan the rectangular two-dimensional area 206 in the x direction, so-called linear scan (linea).
r scan).

【0026】なお、超音波トランスデューサアレイが、
超音波送波方向に張り出した円弧に沿って形成されたい
わゆるコンベックスアレイ(convex arra
y)である場合は、リニアスキャンと同様な音線走査に
より、例えば図8に示すように、音線202の放射点2
00を円弧状の軌跡204に沿って移動させ、扇面状の
2次元領域206をθ方向に走査して、いわゆるコンベ
ックススキャンが行えるのはいうまでもない。
The ultrasonic transducer array is
A so-called convex array (convex array) formed along an arc extending in the ultrasonic wave transmission direction.
In the case of y), a sound ray scan similar to the linear scan is performed, and, for example, as shown in FIG.
Needless to say, so-called convex scan can be performed by moving 00 along the arcuate locus 204 and scanning the fan-shaped two-dimensional region 206 in the θ direction.

【0027】このような2次元領域206のスキャン
を、スイープ(sweep)機構31によって、超音波
プローブ33’の傾きまたは位置を連続的に変化させな
がら行うことにより3次元走査を行う。スイープ機構3
1、超音波プローブ33’および送受信部36’からな
る部分は、本発明における送受信手段の実施の形態の一
例である。
Three-dimensional scanning is performed by continuously scanning the two-dimensional region 206 while the inclination or position of the ultrasonic probe 33 'is continuously changed by the sweep mechanism 31. Sweep mechanism 3
1. The portion including the ultrasonic probe 33 ′ and the transmitting / receiving unit 36 ′ is an example of the embodiment of the transmitting / receiving means in the present invention.

【0028】超音波プローブ33’の傾きを連続的に変
化させるときは、例えば図9に示すように、2次元領域
206の傾斜角度φが変化しφ方向の走査を行うことが
できる。超音波プローブ33’の位置を連続的に変化さ
せるときは、例えば図10に示すように、2次元領域2
06の位置yが変化しy方向の走査を行うことができ
る。
When continuously changing the inclination of the ultrasonic probe 33 ', for example, as shown in FIG. 9, the inclination angle φ of the two-dimensional area 206 is changed and scanning in the φ direction can be performed. When continuously changing the position of the ultrasonic probe 33 ', for example, as shown in FIG.
The position y of 06 changes and scanning in the y direction can be performed.

【0029】以下、θ方向またはx方向の走査を主走査
ともいい、φ方向またはy方向の走査を副走査ともい
う。副走査は、2次元アレイでは送受信部36によって
電子的に行われ、1次元アレイではスイープ機構31に
よって機械的に行われる。スイープ機構31を用いない
場合は手動で行ってもよい。副走査を機械的に行う場
合、主走査と副走査の組み合わせは、(θ,φ)、
(θ,y)、(x,φ)および(x,y)の4通りがあ
り得る。なお、機械的な副走査は手動で行ってもよい。
Hereinafter, scanning in the θ direction or x direction is also called main scanning, and scanning in the φ direction or y direction is also called sub scanning. The sub-scan is electronically performed by the transmitting / receiving unit 36 in the two-dimensional array, and mechanically by the sweep mechanism 31 in the one-dimensional array. If the sweep mechanism 31 is not used, it may be performed manually. When mechanically performing sub-scanning, the combination of main scanning and sub-scanning is (θ, φ),
There can be four ways: (θ, y), (x, φ) and (x, y). The mechanical sub-scan may be performed manually.

【0030】3次元走査を主走査と副走査の組み合わせ
により行うので、音線の方位は2次元的に変更される。
すなわち、音線の方位は2次元マトリクスを形成する。
以下、音線の方位の2次元マトリクスを2次元方位マト
リクスともいう。
Since the three-dimensional scanning is performed by the combination of the main scanning and the sub-scanning, the azimuth of the sound ray is two-dimensionally changed.
That is, the directions of the sound rays form a two-dimensional matrix.
Hereinafter, the two-dimensional matrix of the direction of the sound ray is also referred to as a two-dimensional direction matrix.

【0031】図11に、2次元方位マトリクスの一例を
示す。同図に示すように、2次元方位マトリクスは例え
ば66×66の正方マトリクスとされる。なお、マトリ
クスサイズは適宜でよく、また正方マトリクスに限らず
異方マトリクスであってよい。以下、2次元方位マトリ
クスを単に方位マトリクスともいう。方位マトリクスの
行方向は主走査(θまたはx)方向であり、列方向は副
走査(φまたはy)方向である。
FIG. 11 shows an example of a two-dimensional orientation matrix. As shown in the figure, the two-dimensional orientation matrix is, for example, a 66 × 66 square matrix. It should be noted that the matrix size may be appropriate, and it is not limited to a square matrix and may be an anisotropic matrix. Hereinafter, the two-dimensional azimuth matrix is also simply referred to as an azimuth matrix. The row direction of the azimuth matrix is the main scanning (θ or x) direction, and the column direction is the sub scanning (φ or y) direction.

【0032】本装置は、このような方位マトリクスにつ
いて飛び越し走査を行うことによって3次元走査を行
う。以下、飛び越し走査について説明する。方位マトリ
クスにおける各方位は例えば3×3のマトリクス単位で
グループ(group)化されている。グループ間に重
複はない。以下、これを部分マトリクスともいう。66
×66の方位マトリクスにおいては、部分マトリクスが
22×22個できる。なお、部分マトリクスのマトリク
スサイズは3×3に限らず適宜でよい。また、正方マト
リクスに限らず異方マトリクスであってよい。
The present apparatus performs three-dimensional scanning by performing interlaced scanning on such an orientation matrix. The interlaced scanning will be described below. Each azimuth in the azimuth matrix is grouped in, for example, a 3 × 3 matrix unit. There is no overlap between groups. Hereinafter, this is also referred to as a partial matrix. 66
In the x66 azimuth matrix, 22 × 22 partial matrices can be formed. The matrix size of the partial matrix is not limited to 3 × 3 and may be any size. Further, it is not limited to a square matrix, but may be an anisotropic matrix.

【0033】図12に部分マトリクスの1つを示す。同
図において部分マトリクスのセル(cell)内の数字
1〜9は飛び越し走査の相対的な順番を表す。なお、セ
ルへの順番の付与は適宜でよい。飛び越し走査は、各部
分マトリクスにおける相対順番が同一な方位について、
部分マトリクス単位で順次に超音波を送受信することに
より行われる。
FIG. 12 shows one of the partial matrices. In the figure, the numbers 1 to 9 in the cells of the partial matrix represent the relative order of interlaced scanning. Note that the order may be given to the cells. Interlaced scanning is performed for azimuths with the same relative order in each submatrix.
This is performed by sequentially transmitting and receiving ultrasonic waves in units of partial matrix.

【0034】具体的には、1回目の走査は、各部分マト
リクスにおける相対順番1の方位について、部分マトリ
クス単位で順次に超音波を送受信することにより行われ
る。これによって、1回の走査で22×22の方位につ
いての超音波送受信が行われる。このときの方位を、図
13に、マトリクスにおける斜線を付したセルで示す。
Specifically, the first scanning is performed by sequentially transmitting and receiving ultrasonic waves in the unit of partial matrix for the azimuth of relative order 1 in each partial matrix. As a result, ultrasonic wave transmission / reception for 22 × 22 azimuth is performed by one scan. The azimuth at this time is shown in FIG. 13 by the shaded cells in the matrix.

【0035】2回目の走査は、各部分マトリクスにおけ
る相対順番2の方位について、部分マトリクス単位で順
次に超音波を送受信することにより行われる。これによ
って、1回の走査で22×22の方位についての超音波
送受信が行われる。このときの方位を、図14に、マト
リクスにおける斜線を付したセルで示す。
The second scanning is performed by sequentially transmitting and receiving ultrasonic waves in the unit of partial matrix for the azimuth of relative order 2 in each partial matrix. As a result, ultrasonic wave transmission / reception for 22 × 22 azimuth is performed by one scan. The azimuth at this time is shown in FIG. 14 by the shaded cells in the matrix.

【0036】以下同様に、3回目〜9回目の飛び越し走
査が各部分マトリクスにおける相対番号3〜9の方位に
ついてそれぞれ行われる。9回目の走査の方位を図15
に示す。10回目の飛び越し走査で順番が一巡し図13
に示した状態に戻る。以下この繰り返しとなる。以下、
飛び越し走査を単に走査ともいう。1つの走査が3次元
画像の1つのフレームに相当する。
Similarly, the third to ninth interlaced scans are similarly performed for the orientations of relative numbers 3 to 9 in each partial matrix. The azimuth of the ninth scan is shown in FIG.
Shown in. The sequence is completed in the tenth interlaced scan.
Return to the state shown in. This is repeated below. Less than,
Interlaced scanning is also simply called scanning. One scan corresponds to one frame of a three-dimensional image.

【0037】このようにして、66×66の方位マトリ
クスが9回すなわち9フレームに分けて飛び越し走査さ
れる。1フレームあたりの方位は22×22であるか
ら、深さ方向の撮影範囲を例えば150mmとしても、
例えば10フレーム/s程度のフレームレートでの3次
元撮影が可能である。
In this way, the 66 × 66 azimuth matrix is interlaced and scanned 9 times, that is, 9 frames. Since the azimuth per frame is 22 × 22, even if the shooting range in the depth direction is set to 150 mm,
For example, three-dimensional imaging can be performed at a frame rate of about 10 frames / s.

【0038】また、1フレームあたりの方位は22×2
2であるが、走査が一巡するまでは毎回重複しない方位
において送受信を行い、全体として66×66の方位で
の送受信を行うので、方位のインターレース(inte
rlace)により走査の粗さは緩和される。したがっ
て、立体角が例えば60゜程度の3次元領域を撮影した
場合でも十分実用に耐える3次元画像を得ることが可能
である。
The azimuth per frame is 22 × 2
2, the transmission / reception is performed in a direction that does not overlap each time until one scan is completed, and the transmission / reception is performed in the 66 × 66 direction as a whole.
(rrace) reduces the roughness of the scan. Therefore, it is possible to obtain a three-dimensional image that is sufficiently practical even when a three-dimensional region having a solid angle of, for example, about 60 ° is photographed.

【0039】送受信部36(36’)はBモード処理部
40に接続されている。送受信部36(36’)から出
力される音線ごとのエコー受信信号は、Bモード処理部
40に入力される。Bモード処理部40はBモード画像
データを形成するものである。Bモード処理部40は、
エコー受信信号を対数増幅した後に包絡線検波して音線
上の個々の反射点でのエコーの強度を表す信号すなわち
Aスコープ(scope)信号を得て、このAスコープ
信号の各瞬時の振幅をそれぞれ輝度値として、Bモード
画像データを形成する。Bモード処理部40は画像処理
部44に接続されている。画像処理部44は、Bモード
処理部40から入力されるデータに基づいて、3次元画
像を生成する。Bモード処理部40および画像処理部4
4からなる部分は、本発明における画像生成手段の実施
の形態の一例である。
The transmitting / receiving unit 36 (36 ') is connected to the B-mode processing unit 40. The echo reception signal for each sound ray output from the transmission / reception unit 36 (36 ′) is input to the B-mode processing unit 40. The B-mode processing unit 40 forms B-mode image data. The B-mode processing unit 40
After the logarithmic amplification of the echo reception signal, envelope detection is performed to obtain a signal representing the intensity of the echo at each reflection point on the sound ray, that is, an A scope signal, and the instantaneous amplitude of this A scope signal is obtained. B-mode image data is formed as the brightness value. The B-mode processing unit 40 is connected to the image processing unit 44. The image processing unit 44 generates a three-dimensional image based on the data input from the B-mode processing unit 40. B-mode processing unit 40 and image processing unit 4
The part consisting of 4 is an example of an embodiment of the image generating means in the present invention.

【0040】画像処理部44は、図16に示すように、
セントラル・プロセシング・ユニット(CPU:Cen
tral Processing Unit)140を
有する。CPU140には、バス(bus)142によ
って、メインメモリ(main memory)14
4、外部メモリ146、制御部インターフェース(in
terface)148、入力データメモリ(data
memory)152、ディジタル・スキャンコンバ
ータ(DSC:Digital Scan Conve
rter)154、画像メモリ156、および、ディス
プレーメモリ(display memory)158
が接続されている。
The image processing unit 44, as shown in FIG.
Central processing unit (CPU: Cen
a true processing unit 140. The CPU 140 is provided with a main memory 14 by a bus 142.
4, external memory 146, control unit interface (in
interface) 148, input data memory (data)
memory) 152, digital scan converter (DSC: Digital Scan Conve)
rter) 154, an image memory 156, and a display memory (display memory) 158.
Are connected.

【0041】外部メモリ146には、CPU140が実
行するプログラムが記憶されている。外部メモリ146
には、また、CPU140がプログラムを実行するにあ
たって使用する種々のデータも記憶されている。
The external memory 146 stores a program executed by the CPU 140. External memory 146
In addition, various data used by the CPU 140 to execute the program are also stored in the.

【0042】CPU140は、外部メモリ146からプ
ログラムをメインメモリ144にロード(load)し
て実行することにより、所定の画像処理を遂行する。C
PU140は、プログラム実行の過程で、制御部インタ
ーフェース148を通じて後述の制御部48と制御信号
の授受を行う。
The CPU 140 performs predetermined image processing by loading a program from the external memory 146 into the main memory 144 and executing the program. C
The PU 140 exchanges control signals with the control unit 48, which will be described later, through the control unit interface 148 during the program execution.

【0043】Bモード処理部40から音線ごとに入力さ
れたBモード画像データすなわち音データは、入力デー
タメモリ152に記憶される。例えば、図13〜図15
に示したような飛び越し走査を順番にかつ繰り返し行う
場合、各フレームでは斜線を付した方位だけにおいて送
受信が行われるので、それらの方位においてのみ現フレ
ームの音線データが存在する。以下、現フレームの音線
データを現在データともいう。
The B-mode image data, that is, the sound data, input from the B-mode processing unit 40 for each sound ray is stored in the input data memory 152. For example, FIGS.
When the interlaced scanning as shown in FIG. 3 is sequentially and repeatedly performed, since transmission and reception are performed only in the shaded azimuths in each frame, the sound ray data of the current frame exists only in those azimuths. Hereinafter, the sound ray data of the current frame is also referred to as current data.

【0044】なお、入力データメモリ152に記憶され
た音線データは、画像を形成するのに適した態様に加工
されてはいるとはいえ、実質的にエコー受信信号である
ことに変わりはない。
Although the sound ray data stored in the input data memory 152 is processed into a form suitable for forming an image, it is substantially an echo reception signal. .

【0045】現在データが得られる方位はフレームに応
じて順次切り替わり、10フレーム目ごとに元に戻る。
すなわち、各方位の現在データは9フレームに1回の頻
度で得られ、そのつど値が更新される。現在データ以外
は過去の走査によって得られた過去のフレームデータで
あり、以下これを過去データともいう。入力データメモ
リ152には、このような現在データおよび過去データ
が記憶されている。
The direction in which the current data is obtained is sequentially changed according to the frame, and is returned to the original every 10th frame.
That is, the current data of each direction is obtained once every 9 frames, and the value is updated each time. Except for the present data, the past frame data obtained by the past scanning is referred to as past data. The input data memory 152 stores such current data and past data.

【0046】入力データメモリ152の音線データは、
フレームごとにDSC154で走査変換されて画像メモ
リ156に書き込まれる。CPU140は、画像メモリ
156に音線データを書き込むにあたり、現在データが
ない方位すなわち過去データしかない方位については仮
想的な現在データを生成し、それをその方位における現
在データとして書き込む。CPU140は、本発明にお
ける信号生成手段の実施の形態の一例である。なお、C
PU140は、仮想的な現在データを生成せずに現在デ
ータだけを画像メモリ156に書き込むようにしてもよ
い。
The sound ray data of the input data memory 152 is
Each frame is scan converted by the DSC 154 and written in the image memory 156. When writing the sound ray data in the image memory 156, the CPU 140 generates virtual present data for an orientation having no present data, that is, an orientation having only past data, and writes it as the present data in that orientation. The CPU 140 is an example of the embodiment of the signal generating means in the present invention. Note that C
The PU 140 may write only the current data in the image memory 156 without generating virtual current data.

【0047】CPU140による仮想的な現在データの
生成について説明する。仮想的な現在データの生成は、
4つの方法のいずれかによって行われる。以下、4つの
方法について順次説明する。
Generation of virtual current data by the CPU 140 will be described. Virtual current data generation is
This can be done by any of four methods. The four methods will be sequentially described below.

【0048】1番目の方法は、現在データの変化量に基
づいて過去データを補正することにより仮想的な現在デ
ータを生成する方法である。現在データの変化量とは、
9フレームに1回の頻度で更新されるデータの前回から
の変化量であり、具体的には次のようなものである。
The first method is a method for generating virtual current data by correcting past data based on the amount of change in current data. What is the amount of change in current data?
This is the amount of change from the previous time in the data that is updated once every 9 frames, and is specifically as follows.

【0049】9回の走査で方位マトリクスの全方位のデ
ータがそろう。これを1つの部分マトリクスに着目して
示せば、図17に示すように、部分マトリクスAのデー
タA1〜A9がすべてそろう。隣接する部分マトリクス
においても同様である。なお、添え数字は飛び越し走査
の相対的な順番を表す。
Data of all directions of the direction matrix are obtained by scanning 9 times. If this is shown paying attention to one partial matrix, all the data A1 to A9 of the partial matrix A are aligned as shown in FIG. The same applies to adjacent partial matrices. The subscripts indicate the relative order of interlaced scanning.

【0050】10回目の走査では、相対順番1の飛び越
し走査が行われ、図18に示すように、現在データA
1’,B1’,C1’,D1’が得られる。これら以外
は過去データである。
In the tenth scan, an interlaced scan of relative order 1 is performed, and as shown in FIG.
1 ', B1', C1 ', D1' are obtained. Other than these are past data.

【0051】現在データA1’,B1’,C1’,D
1’について、前回の値A1,B1,C1,D1からの
変化量がそれぞれ計算される。それによって、図19に
示すように、変化量a1,b1,c1,d1がそれぞれ
得られる。相対順番1の方位においてデータがこのよう
に変化しているとき、部分マトリクスAにおける他の方
位の過去データも、この時点では同じ傾向で変化してい
る可能性が高い。そこで、それら過去データの現時点で
の変化量を変化量a1,b1,c1,d1に基づいて類
推する。
Present data A1 ', B1', C1 ', D
For 1 ′, the amounts of change from the previous values A1, B1, C1, D1 are calculated, respectively. As a result, the amounts of change a1, b1, c1, and d1 are obtained as shown in FIG. When the data changes in this way in the azimuth of relative order 1, the past data of the other azimuths in the partial matrix A are likely to change in the same tendency at this time. Therefore, the amount of change in the past data at the present time is estimated based on the amounts of change a1, b1, c1, and d1.

【0052】類推は補間演算によって行われる。部分マ
トリクスAにおける他の方位は、変化量a1,b1,c
1,d1が求められた4つの方位の内側の8つの方位で
あるから、それらの方位におけるデータの変化量は、変
化量a1,b1,c1,d1を用いた補間演算によって
類推することが可能である。
The analogy is performed by interpolation calculation. The other directions in the partial matrix A are change amounts a1, b1, c
Since 1 and d1 are the eight directions inside the four determined directions, the amount of change in the data in those directions can be estimated by an interpolation calculation using the amounts of change a1, b1, c1, and d1. Is.

【0053】補間演算としては、例えば、2つのデータ
を用いた直線補間が利用される。すなわち、変化量a
1,b1を用いてそれらの間の2つの方位のデータの変
化量が直線補間され、変化量a1,c1を用いてそれら
の間の2つの方位のデータの変化量が直線補間され、変
化量a1,d1を用いてそれらの間の2つの方位のデー
タの変化量が直線補間され、変化量b1,c1を用いて
それらの間の2つの方位のデータの変化量が直線補間さ
れる。なお、補間演算は2つのデータを用いた直線補間
に限らず、4つのデータa1,b1,c1,d1をすべ
て用いた非直線2次元補間であってよい。これによっ
て、図20に示すように、変化量の類推値a2〜a9が
得られる。
As the interpolation calculation, linear interpolation using two data is used, for example. That is, the change amount a
1 and b1 are used to linearly interpolate the amount of change in the data of the two orientations between them, and the amount of change a1 and c1 are used to linearly interpolate the amount of change in data of the two orientations between them. A1 and d1 are used to linearly interpolate the amount of change in the two azimuth data between them, and change amounts b1 and c1 are used to linearly interpolate the amount of change in the two azimuth data between them. The interpolation calculation is not limited to the linear interpolation using the two data, but may be the non-linear two-dimensional interpolation using all the four data a1, b1, c1, d1. As a result, as shown in FIG. 20, analogy values a2 to a9 of the change amount are obtained.

【0054】このような変化量の類推値a2〜a9を用
いて過去データを補正する。補正は変化量の類推値a2
〜a9を、図18に示した過去データA2〜A9にそれ
ぞれ加算することにより行われる。これによって、図2
1に示すように、現在データA1’,B1’,C1’,
D1’と、それらの前回からの変化量を用いて過去デー
タを補正して得られる仮想的な現在データA2’〜A
9’が得られる。
The past data is corrected by using the analogy values a2 to a9 of the variation amount. The correction is the analogy value a2 of the change amount.
To a9 are added to the past data A2 to A9 shown in FIG. 18, respectively. As a result, FIG.
As shown in 1, the current data A1 ′, B1 ′, C1 ′,
D1 'and virtual current data A2' to A obtained by correcting the past data using the amount of change from the previous time.
9'is obtained.

【0055】他の部分マトリクスについても同様にして
仮想的な現在データが求められる。また、これ以降の各
フレームにおいても、それぞれ同様なことが行われる。
このように現在データの変化量に基づいて過去データを
補正することにより、現フレームに最もふさわしい仮想
的な現在データを得ることができる。
Virtual current data is similarly obtained for the other partial matrices. The same thing is performed in each of the subsequent frames.
In this way, by correcting the past data based on the change amount of the current data, it is possible to obtain virtual current data most suitable for the current frame.

【0056】2番目の方法は、現在データからの補間に
よって仮想的な現在データを生成する方法である。例え
ば、図22に示すように、あるフレームにおいて現在デ
ータA1’,B1’,C1’,D1’が得られたとき、
部分マトリクスAにおける仮想的な現在データは、現在
データA1’,B1’,C1’,D1’からの補間演算
によって求める。補間演算としては例えば直線補間が採
用されるがそれに限るものではない。これによって、図
23に示すように、仮想的な現在データA2’’〜A
9’’がそれぞれ得られる。他の部分マトリクスについ
ても同様な補間演算が行われる。各フレームにおいても
それぞれ同様なことが行われる。このような現在データ
を用いた補間演算により、現フレームにふさわしい仮想
的な現在データを得ることができる。この方法は仮想的
な現在データを求めるのに過去データを必要としない点
で好ましい。
The second method is a method of generating virtual current data by interpolation from the current data. For example, as shown in FIG. 22, when the current data A1 ′, B1 ′, C1 ′, D1 ′ is obtained in a certain frame,
Virtual current data in the partial matrix A is obtained by interpolation calculation from the current data A1 ', B1', C1 ', D1'. As the interpolation calculation, for example, linear interpolation is adopted, but the interpolation calculation is not limited thereto. As a result, as shown in FIG. 23, the virtual current data A2 ″ -A
9 '' is obtained respectively. Similar interpolation calculation is performed for other partial matrices. The same thing is performed in each frame. By such an interpolation calculation using the current data, virtual current data suitable for the current frame can be obtained. This method is preferable because it does not require past data to obtain virtual current data.

【0057】3番目の方法は、過去データを仮想的な現
在データとして代用することである。3次元走査一巡後
のあるフレームにおいて、例えば、図24に示すよう
に、現在データA1’,B1’,C1’,D1’が得ら
れたとき、他の方位ではそれ以前のフレームで得られた
過去データA2〜A9がすでに存在するので、それぞれ
そのまま仮想的な現在データとする。他の部分マトリク
スにおいても同様な事を行う。各フレームにおいてもそ
れぞれ同様なことを行う。このような過去データの代用
により、簡易に仮想的な現在データを得ることができ
る。
The third method is to substitute past data as virtual current data. In one frame after one round of three-dimensional scanning, for example, as shown in FIG. 24, when the current data A1 ′, B1 ′, C1 ′, D1 ′ is obtained, it is obtained in the previous frame in other directions. Since the past data A2 to A9 already exist, they are used as virtual current data as they are. Do the same for the other sub-matrices. The same thing is done in each frame. By substituting such past data, it is possible to easily obtain virtual present data.

【0058】4番目の方法は、現在データを他の方位の
仮想的な現在データとして代用することである。例え
ば、図22に示したように、あるフレームにおいて現在
データA1’,B1’,C1’,D1’が得られたと
き、部分マトリクスAの他の方位の仮想的な現在データ
は、その方位に最も近い方位すなわち最寄りの方位の現
在データで代用する。
The fourth method is to substitute the current data as virtual current data in another direction. For example, as shown in FIG. 22, when the current data A1 ′, B1 ′, C1 ′, D1 ′ is obtained in a certain frame, the virtual current data of the other orientation of the partial matrix A is in that orientation. The current data of the closest bearing, that is, the closest bearing is used as a substitute.

【0059】これによって、部分マトリクスAのデータ
は図25に示すようになる。すなわち、相対順番2,
4,5の方位に最寄りの方位は相対順番1の方位である
から、それらの方位における仮想的な現在データはいず
れもA1となる。相対順番3,6の方位に最寄りの方位
は部分マトリクスBの相対順番1の方位であるから、そ
れらの方位における仮想的な現在データはいずれもB1
となる。相対順番7,8の方位に最寄りの方位は部分マ
トリクスCの相対順番1の方位であるから、それらの方
位における仮想的な現在データはいずれもC1となる。
相対順番9の方位に最寄りの方位は部分マトリクスDの
相対順番1の方位であるから、それらの方位における仮
想的な現在データはD1となる。他の部分マトリクスに
おいても同様であり、他の各フレームにおいても同様で
ある。このような現在データの代用により、簡易に仮想
的な現在データを得ることができる。
As a result, the data of the partial matrix A becomes as shown in FIG. That is, the relative order 2,
Since the azimuths closest to the azimuths 4 and 5 are the azimuths having the relative order 1, the virtual current data in those azimuths are all A1. Since the azimuth closest to the azimuths in the relative orders 3 and 6 is the azimuth in the relative order 1 of the partial matrix B, the virtual current data in those azimuths are all B1.
Becomes Since the azimuth closest to the azimuths in the relative orders 7 and 8 is the azimuth in the relative order 1 of the partial matrix C, the virtual current data in those azimuths are all C1.
Since the azimuth closest to the azimuth in the relative order 9 is the azimuth in the relative order 1 of the partial matrix D, the virtual current data in those azimuths is D1. The same applies to other partial matrices, and the same applies to other respective frames. Substitution of such current data makes it possible to easily obtain virtual current data.

【0060】このようにして生成された仮想的な現在デ
ータがそのフレームの現在データとともにDSC154
で走査変換されて画像メモリ156に書き込まれる。画
像メモリ156のデータはディスプレーメモリ158を
通じて表示部46に出力される。
The virtual current data generated in this manner is combined with the current data of the frame and the DSC 154.
Is scanned and converted and written in the image memory 156. The data in the image memory 156 is output to the display unit 46 through the display memory 158.

【0061】表示部46は、画像処理部44から与えら
れた画像信号に基づいて3次元画像を表示する。表示部
46は、カラー(color)画像が表示可能なCRT
(cathode−ray tube)を用いたグラフ
ィックディスプレー(graphic displa
y)等で構成される。
The display section 46 displays a three-dimensional image based on the image signal provided from the image processing section 44. The display unit 46 is a CRT capable of displaying a color image.
A graphic display using a (cathode-ray tube)
y) and the like.

【0062】上記のような3次元走査およびそれに対応
した音線データの処理により、3次元画像は、音線密
度、フレームレートおよび撮影範囲がいずれも実用的な
ものとなる。
By the above-described three-dimensional scanning and the processing of the sound ray data corresponding thereto, the sound ray density, the frame rate and the photographing range of the three-dimensional image become practical.

【0063】以上のスイープ機構31、送受信部36
(36’)、Bモード処理部40、画像処理部44およ
び表示部46には制御部48が接続されている。制御部
48は、それら各部に制御信号を与えてその動作を制御
する。制御部48には、被制御の各部から各種の報知信
号が入力される。制御部48の制御の下で、Bモード動
作が実行される。
The sweep mechanism 31 and the transmission / reception unit 36 described above
The control unit 48 is connected to (36 ′), the B-mode processing unit 40, the image processing unit 44, and the display unit 46. The control unit 48 gives a control signal to each of these units to control the operation thereof. Various notification signals are input to the control unit 48 from each controlled unit. Under the control of the control unit 48, the B mode operation is executed.

【0064】制御部48には操作部50が接続されてい
る。操作部50は使用者によって操作され、制御部48
に適宜の指令や情報を入力するようになっている。操作
部50は、例えばキーボード(keyboard)やポ
インティングデバイス(pointing devic
e)およびその他の操作具を備えている。
An operation unit 50 is connected to the control unit 48. The operation unit 50 is operated by the user, and the control unit 48
It is designed to input appropriate commands and information. The operation unit 50 is, for example, a keyboard or a pointing device.
e) and other operating tools.

【0065】[0065]

【発明の効果】以上詳細に説明したように、本発明によ
れば、音線密度、フレームレートおよび撮影範囲が実用
的な3次元撮影を行う超音波撮影装置を実現することが
できる。
As described in detail above, according to the present invention, it is possible to realize an ultrasonic imaging apparatus for performing three-dimensional imaging in which the sound ray density, the frame rate and the imaging range are practical.

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明の実施の形態の一例のブロック図であ
る。
FIG. 1 is a block diagram of an example of an embodiment of the present invention.

【図2】超音波トランスデューサアレイの模式図であ
る。
FIG. 2 is a schematic diagram of an ultrasonic transducer array.

【図3】音線走査の概念図である。FIG. 3 is a conceptual diagram of sound ray scanning.

【図4】本発明の実施の形態の一例のブロック図であ
る。
FIG. 4 is a block diagram of an example of an embodiment of the present invention.

【図5】超音波トランスデューサアレイの模式図であ
る。
FIG. 5 is a schematic diagram of an ultrasonic transducer array.

【図6】音線走査の概念図である。FIG. 6 is a conceptual diagram of sound ray scanning.

【図7】音線走査の概念図である。FIG. 7 is a conceptual diagram of sound ray scanning.

【図8】音線走査の概念図である。FIG. 8 is a conceptual diagram of sound ray scanning.

【図9】スイープ走査の概念図である。FIG. 9 is a conceptual diagram of sweep scanning.

【図10】スイープ走査の概念図である。FIG. 10 is a conceptual diagram of sweep scanning.

【図11】2次元方位マトリクスの概念図である。FIG. 11 is a conceptual diagram of a two-dimensional azimuth matrix.

【図12】部分マトリクスの概念図である。FIG. 12 is a conceptual diagram of a partial matrix.

【図13】2次元方位マトリクスの走査の概念図であ
る。
FIG. 13 is a conceptual diagram of scanning of a two-dimensional azimuth matrix.

【図14】2次元方位マトリクスの走査の概念図であ
る。
FIG. 14 is a conceptual diagram of scanning a two-dimensional azimuth matrix.

【図15】2次元方位マトリクスの走査の概念図であ
る。
FIG. 15 is a conceptual diagram of scanning of a two-dimensional azimuth matrix.

【図16】画像処理部のブロック図である。FIG. 16 is a block diagram of an image processing unit.

【図17】2次元方位マトリクスにおけるデータ配列の
概念図である。
FIG. 17 is a conceptual diagram of a data array in a two-dimensional orientation matrix.

【図18】2次元方位マトリクスにおけるデータ配列の
概念図である。
FIG. 18 is a conceptual diagram of a data array in a two-dimensional azimuth matrix.

【図19】2次元方位マトリクスにおけるデータ配列の
概念図である。
FIG. 19 is a conceptual diagram of a data array in a two-dimensional orientation matrix.

【図20】2次元方位マトリクスにおけるデータ配列の
概念図である。
FIG. 20 is a conceptual diagram of a data array in a two-dimensional orientation matrix.

【図21】2次元方位マトリクスにおけるデータ配列の
概念図である。
FIG. 21 is a conceptual diagram of a data array in a two-dimensional orientation matrix.

【図22】2次元方位マトリクスにおけるデータ配列の
概念図である。
FIG. 22 is a conceptual diagram of a data array in a two-dimensional azimuth matrix.

【図23】2次元方位マトリクスにおけるデータ配列の
概念図である。
FIG. 23 is a conceptual diagram of a data array in a two-dimensional azimuth matrix.

【図24】2次元方位マトリクスにおけるデータ配列の
概念図である。
FIG. 24 is a conceptual diagram of a data array in a two-dimensional orientation matrix.

【図25】2次元方位マトリクスにおけるデータ配列の
概念図である。
FIG. 25 is a conceptual diagram of a data array in a two-dimensional orientation matrix.

【符号の説明】[Explanation of symbols]

31 スイープ機構 33,33’ 超音波プローブ 36,36’ 送受信部 40 Bモード処理部 44 画像処理部 46 表示部 48 制御部 50 操作部 140 CPU 144 メインメモリ 146 外部メモリ 148 制御部インターフェース 152 入力データメモリ 154 DSC 156 画像メモリ 158 ディスプレーメモリ 31 Sweep mechanism 33,33 'Ultrasonic probe 36,36 'Transceiver 40 B mode processing unit 44 Image processing unit 46 Display 48 control unit 50 Operation part 140 CPU 144 main memory 146 external memory 148 Control unit interface 152 Input data memory 154 DSC 156 image memory 158 display memory

───────────────────────────────────────────────────── フロントページの続き (72)発明者 橋本 浩 東京都日野市旭が丘四丁目7番地の127 ジーイー横河メディカルシステム株式会社 内 Fターム(参考) 2G047 BA03 CA01 DB02 DB12 EA07 EA08 EA09 GB02 GB17 GF15 GF17 GF20 GG19 GG34 GG41 GH09 4C301 BB13 BB22 EE07 EE08 EE10 GB10 HH08 HH12 HH13 JB17 JB29 KK16 4C601 BB03 BB05 BB06 EE04 EE05 EE07 GB01 GB03 GB06 HH14 HH16 HH17 HH22 JB34 JB45 JB51 JC25 KK21 5C024 AX10 CX37 DX06 EX06    ─────────────────────────────────────────────────── ─── Continued front page    (72) Inventor Hiroshi Hashimoto             127, 4-7 Asahigaoka, Hino City, Tokyo             GE Yokogawa Medical System Co., Ltd.             Within F-term (reference) 2G047 BA03 CA01 DB02 DB12 EA07                       EA08 EA09 GB02 GB17 GF15                       GF17 GF20 GG19 GG34 GG41                       GH09                 4C301 BB13 BB22 EE07 EE08 EE10                       GB10 HH08 HH12 HH13 JB17                       JB29 KK16                 4C601 BB03 BB05 BB06 EE04 EE05                       EE07 GB01 GB03 GB06 HH14                       HH16 HH17 HH22 JB34 JB45                       JB51 JC25 KK21                 5C024 AX10 CX37 DX06 EX06

Claims (8)

【特許請求の範囲】[Claims] 【請求項1】 複数の方位に順次に超音波を送波してエ
コーを受信することを2次元方位マトリクスにおける方
位の飛び越し走査の繰り返しによって行うとともに、飛
び越し走査の繰り返しのたびに前回とは重複しない方位
を走査する送受信手段と、 前記エコーの受信信号に基づいて3次元画像を生成する
画像生成手段と、を具備することを特徴とする超音波撮
影装置。
1. An ultrasonic wave is sequentially transmitted to a plurality of azimuths to receive an echo by repeating interlace scanning of the azimuth in a two-dimensional azimuth matrix, and each time the interlace scanning is repeated, overlap with the previous time is performed. An ultrasonic imaging apparatus comprising: a transmission / reception unit that scans a direction that does not exist; and an image generation unit that generates a three-dimensional image based on a received signal of the echo.
【請求項2】 複数の方位に順次に超音波を送波してエ
コーを受信することを2次元方位マトリクスにおける方
位の飛び越し走査の繰り返しによって行うとともに、飛
び越し走査の繰り返しのたびに前回とは重複しない方位
を走査する送受信手段と、 前記飛び越し走査の各回ごとに、飛び越した方位におけ
る過去の回の受信信号を今回走査した方位における受信
信号の前回からの変化量に応じて補正することによっ
て、飛び越した方位における今回の仮想的な受信信号を
生成する信号生成手段と、 前記飛び越し走査の各回ごとに、今回走査した方位にお
ける受信信号および前記仮想的な受信信号に基づいて3
次元画像を生成する画像生成手段と、を具備することを
特徴とする超音波撮影装置。
2. An ultrasonic wave is sequentially transmitted to a plurality of azimuths to receive an echo by repeating interlace scanning of the azimuths in a two-dimensional azimuth matrix, and each time the interlaced scanning is repeated, the overlap with the previous time is performed. Transmitting and receiving means for scanning the azimuth not to be performed, and each time the interlaced scanning is performed, the reception signal of the past time in the interlaced orientation is corrected in accordance with the change amount of the reception signal in the direction scanned this time from the previous time, and thus the interlace is skipped. Signal generation means for generating a virtual reception signal of this time in the azimuth direction, and 3 for each time of the interlaced scanning based on the reception signal in the azimuth direction of the current scan and the virtual reception signal.
An ultrasonic imaging apparatus, comprising: an image generating unit that generates a three-dimensional image.
【請求項3】 複数の方位に順次に超音波を送波してエ
コーを受信することを2次元方位マトリクスにおける方
位の飛び越し走査の繰り返しによって行うとともに、飛
び越し走査の繰り返しのたびに前回とは重複しない方位
を走査する送受信手段と、 前記飛び越し走査の各回ごとに、今回走査した方位にお
ける受信信号からの補間演算によって、飛び越した方位
における今回の仮想的な受信信号を生成する信号生成手
段と、 前記飛び越し走査の各回ごとに、今回走査した方位にお
ける受信信号および前記仮想的な受信信号に基づいて3
次元画像を生成する画像生成手段と、を具備することを
特徴とする超音波撮影装置。
3. Sequentially transmitting ultrasonic waves to a plurality of directions and receiving echoes by repeating interlace scanning of directions in a two-dimensional azimuth matrix, and repeating each time interlaced scanning repeats from the previous time. Transmitting and receiving means for scanning the azimuth not performed, each time the interlaced scanning, by the interpolation calculation from the received signal in the azimuth scanned this time, signal generation means for generating the virtual received signal of this time in the azimuth jumped, 3 for each interlaced scan based on the received signal in the direction scanned this time and the virtual received signal.
An ultrasonic imaging apparatus, comprising: an image generating unit that generates a three-dimensional image.
【請求項4】 複数の方位に順次に超音波を送波してエ
コーを受信することを2次元方位マトリクスにおける方
位の飛び越し走査の繰り返しによって行うとともに、飛
び越し走査の繰り返しのたびに前回とは重複しない方位
を走査する送受信手段と、 前記飛び越し走査の各回ごとに、飛び越した方位におけ
る過去の回の受信信号で代用することによって、飛び越
した方位における今回の仮想的な受信信号を生成する信
号生成手段と、 前記飛び越し走査の各回ごとに、今回走査した方位にお
ける受信信号および前記仮想的な受信信号に基づいて3
次元画像を生成する画像生成手段と、を具備することを
特徴とする超音波撮影装置。
4. Sequentially transmitting ultrasonic waves to a plurality of azimuths and receiving echoes by repeating interlace scanning of azimuths in a two-dimensional azimuth matrix, and repeating each time interlaced scanning repeats from the previous time. A transmitting / receiving unit that scans an azimuth that does not exist, and a signal generation unit that generates a virtual reception signal of this time in the jumped azimuth by substituting the reception signal of the past times in the jumped azimuth for each time of the interlaced scanning Based on the received signal in the direction scanned this time and the virtual received signal for each interlaced scan.
An ultrasonic imaging apparatus, comprising: an image generating unit that generates a three-dimensional image.
【請求項5】 複数の方位に順次に超音波を送波してエ
コーを受信することを2次元方位マトリクスにおける方
位の飛び越し走査の繰り返しによって行うとともに、飛
び越し走査の繰り返しのたびに前回とは重複しない方位
を走査する送受信手段と、 前記飛び越し走査の各回ごとに、今回走査した方位にお
ける受信信号のうち最寄りの方位の受信信号で代用する
ことによって、飛び越した方位における今回の仮想的な
受信信号を生成する信号生成手段と、 前記飛び越し走査の各回ごとに、今回走査した方位にお
ける受信信号および前記仮想的な受信信号に基づいて3
次元画像を生成する画像生成手段と、を具備することを
特徴とする超音波撮影装置。
5. An ultrasonic wave is sequentially transmitted to a plurality of azimuth directions to receive an echo by repeating interlace scanning of the azimuth in a two-dimensional azimuth matrix, and each time the interlaced scanning is repeated, the overlap with the previous time is performed. Not transmitting and receiving means for scanning the azimuth, each time the interlaced scanning, by substituting the received signal of the nearest azimuth among the received signals in the azimuth scanned this time, the virtual received signal of this time in the azimuth jumped A signal generating means for generating, and 3 for each time of the interlaced scanning based on the reception signal in the direction scanned this time and the virtual reception signal.
An ultrasonic imaging apparatus, comprising: an image generating unit that generates a three-dimensional image.
【請求項6】 前記送受信手段は前記飛び越しを予め定
められた方位間隔で行う、ことを特徴とする請求項1な
いし請求項5のうちのいずれか1つに記載の超音波撮影
装置。
6. The ultrasonic imaging apparatus according to claim 1, wherein the transmitting / receiving unit performs the interlace at predetermined azimuth intervals.
【請求項7】 前記方位間隔は等間隔である、ことを特
徴とする請求項6に記載の超音波撮影装置。
7. The ultrasonic imaging apparatus according to claim 6, wherein the azimuth intervals are equidistant.
【請求項8】 前記方位間隔は非等間隔である、ことを
特徴とする請求項6に記載の超音波撮影装置。
8. The ultrasonic imaging apparatus according to claim 6, wherein the azimuth intervals are unequal intervals.
JP2001377039A 2001-12-11 2001-12-11 Ultrasound imaging device Expired - Fee Related JP3808760B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001377039A JP3808760B2 (en) 2001-12-11 2001-12-11 Ultrasound imaging device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001377039A JP3808760B2 (en) 2001-12-11 2001-12-11 Ultrasound imaging device

Publications (2)

Publication Number Publication Date
JP2003190160A true JP2003190160A (en) 2003-07-08
JP3808760B2 JP3808760B2 (en) 2006-08-16

Family

ID=27590772

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001377039A Expired - Fee Related JP3808760B2 (en) 2001-12-11 2001-12-11 Ultrasound imaging device

Country Status (1)

Country Link
JP (1) JP3808760B2 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004154415A (en) * 2002-11-07 2004-06-03 Ge Medical Systems Global Technology Co Llc Ultrasonic pulse transmission method and ultrasonic diagnostic equipment
JP2004174236A (en) * 2002-11-13 2004-06-24 Fuji Photo Film Co Ltd Ultrasonic imaging method and ultrasonic imaging apparatus
JP2005058587A (en) * 2003-08-19 2005-03-10 Ge Medical Systems Global Technology Co Llc Ultrasonic image obtaining method and ultrasonic diagnosing device
JP2006314689A (en) * 2005-05-16 2006-11-24 Toshiba Corp Ultrasonic diagnostic system and its control program
JP2008076129A (en) * 2006-09-20 2008-04-03 Hitachi Ltd Ultrasonic inspection method and ultrasonic inspection device
JP2013088346A (en) * 2011-10-20 2013-05-13 Hitachi-Ge Nuclear Energy Ltd Three-dimensional ultrasonic flaw inspection method for turbine rotor blade fork

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004154415A (en) * 2002-11-07 2004-06-03 Ge Medical Systems Global Technology Co Llc Ultrasonic pulse transmission method and ultrasonic diagnostic equipment
JP2004174236A (en) * 2002-11-13 2004-06-24 Fuji Photo Film Co Ltd Ultrasonic imaging method and ultrasonic imaging apparatus
JP4522687B2 (en) * 2002-11-13 2010-08-11 富士フイルム株式会社 Ultrasonic imaging method and ultrasonic imaging apparatus
JP2005058587A (en) * 2003-08-19 2005-03-10 Ge Medical Systems Global Technology Co Llc Ultrasonic image obtaining method and ultrasonic diagnosing device
JP2006314689A (en) * 2005-05-16 2006-11-24 Toshiba Corp Ultrasonic diagnostic system and its control program
JP2008076129A (en) * 2006-09-20 2008-04-03 Hitachi Ltd Ultrasonic inspection method and ultrasonic inspection device
JP2013088346A (en) * 2011-10-20 2013-05-13 Hitachi-Ge Nuclear Energy Ltd Three-dimensional ultrasonic flaw inspection method for turbine rotor blade fork

Also Published As

Publication number Publication date
JP3808760B2 (en) 2006-08-16

Similar Documents

Publication Publication Date Title
EP2187813B1 (en) System and method for spatial compounding using phased arrays
JP4428477B2 (en) Method and apparatus for rapid distributed calculation of time delay and apodization values for beamforming
JPH09313487A (en) Method and device for ultrasonic three-dimensional photographing
JP3218216B2 (en) 3D image processing device
WO2006134686A1 (en) Ultrasonographic device
JP2001245884A (en) Ultrasonic imaging apparatus
JP2003164451A (en) Method and system for combining beam
CN101744638A (en) Multifunctional ultrasonic imaging system
JPH0644908B2 (en) Method and apparatus for creating a signal for forming an image of a target area in a body
US20160157830A1 (en) Ultrasonic diagnostic device and ultrasonic image generation method
JP4107840B2 (en) Refraction delay error correction using an agile beamformer.
US10299762B2 (en) Ultrasound diagnostic apparatus, signal processing method for ultrasound diagnostic apparatus, and recording medium
CN108885258A (en) Two dimensional ultrasound array energy converter with one-dimensional tile
JP2003190160A (en) Ultrasonic imaging system
US20050124887A1 (en) Three dimensional scan conversion of data from mechanically scanned array probes
JP4181007B2 (en) Ultrasonic diagnostic equipment
JP3712506B2 (en) Ultrasonic imaging device
JPH1156841A (en) Three-dimensional region-of-interest setting method, image processor and ultrasonograph
JP7211150B2 (en) ULTRASOUND DIAGNOSTIC DEVICE, ULTRASOUND IMAGE GENERATING METHOD AND PROGRAM
JP4418052B2 (en) Ultrasonic beam scanning method and apparatus and ultrasonic imaging apparatus
JP3715745B2 (en) Ultrasonic imaging device
JP4246853B2 (en) Ultrasonic diagnostic equipment
CN114072063B (en) Ultrasonic three-dimensional imaging method and device
JP2002165790A (en) Ultrasonic imaging device
JPH1062396A (en) Ultrasonic scanning device, ultrasonic diagnostic device, nondestructive inspecting device, and ultrasonic oscillator array

Legal Events

Date Code Title Description
A625 Written request for application examination (by other person)

Free format text: JAPANESE INTERMEDIATE CODE: A625

Effective date: 20040406

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20051115

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20051129

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060213

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060425

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060518

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100526

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100526

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100526

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110526

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110526

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120526

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120526

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130526

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130526

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130526

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130526

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130526

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees