JP3935433B2 - 空間的複合のための適応画像処理 - Google Patents
空間的複合のための適応画像処理 Download PDFInfo
- Publication number
- JP3935433B2 JP3935433B2 JP2002559708A JP2002559708A JP3935433B2 JP 3935433 B2 JP3935433 B2 JP 3935433B2 JP 2002559708 A JP2002559708 A JP 2002559708A JP 2002559708 A JP2002559708 A JP 2002559708A JP 3935433 B2 JP3935433 B2 JP 3935433B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- combining
- echo
- point
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012545 processing Methods 0.000 title claims abstract description 16
- 230000003044 adaptive effect Effects 0.000 title abstract description 3
- 238000013329 compounding Methods 0.000 title description 3
- 230000004044 response Effects 0.000 claims abstract description 6
- 238000000034 method Methods 0.000 claims description 46
- 238000001514 detection method Methods 0.000 claims description 18
- 238000002604 ultrasonography Methods 0.000 claims description 17
- 238000012935 Averaging Methods 0.000 claims description 16
- 238000002592 echocardiography Methods 0.000 claims description 14
- 238000002059 diagnostic imaging Methods 0.000 claims description 8
- 238000009826 distribution Methods 0.000 claims description 6
- 230000007704 transition Effects 0.000 claims description 5
- 230000035945 sensitivity Effects 0.000 abstract description 2
- 230000008569 process Effects 0.000 description 24
- 239000002131 composite material Substances 0.000 description 14
- 238000003384 imaging method Methods 0.000 description 10
- 238000004458 analytical method Methods 0.000 description 7
- 238000010168 coupling process Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 238000003745 diagnosis Methods 0.000 description 4
- 238000012805 post-processing Methods 0.000 description 4
- 210000002435 tendon Anatomy 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000007689 inspection Methods 0.000 description 3
- 210000000988 bone and bone Anatomy 0.000 description 2
- 230000001427 coherent effect Effects 0.000 description 2
- 230000006378 damage Effects 0.000 description 2
- 238000002405 diagnostic procedure Methods 0.000 description 2
- 238000011835 investigation Methods 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 210000003205 muscle Anatomy 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 239000000523 sample Substances 0.000 description 2
- 210000004872 soft tissue Anatomy 0.000 description 2
- 210000001519 tissue Anatomy 0.000 description 2
- 206010028980 Neoplasm Diseases 0.000 description 1
- 238000012952 Resampling Methods 0.000 description 1
- 208000021945 Tendon injury Diseases 0.000 description 1
- 208000027418 Wounds and injury Diseases 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 210000000481 breast Anatomy 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 210000000038 chest Anatomy 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 230000003750 conditioning effect Effects 0.000 description 1
- 238000011109 contamination Methods 0.000 description 1
- 239000002872 contrast media Substances 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000001605 fetal effect Effects 0.000 description 1
- 210000003754 fetus Anatomy 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 208000014674 injury Diseases 0.000 description 1
- 210000001503 joint Anatomy 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000002792 vascular Effects 0.000 description 1
- 210000005166 vasculature Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/52—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
- G01S7/52017—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 particularly adapted to short-range imaging
- G01S7/5205—Means for monitoring or calibrating
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/88—Sonar systems specially adapted for specific applications
- G01S15/89—Sonar systems specially adapted for specific applications for mapping or imaging
- G01S15/8906—Short-range imaging systems; Acoustic microscope systems using pulse-echo techniques
- G01S15/8995—Combining images from different aspect angles, e.g. spatial compounding
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/52—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
- G01S7/52017—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 particularly adapted to short-range imaging
- G01S7/52023—Details of receivers
- G01S7/52036—Details of receivers using analysis of echo signal for target characterisation
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/52—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
- G01S7/52017—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 particularly adapted to short-range imaging
- G01S7/52046—Techniques for image enhancement involving transmitter or receiver
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/52—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
- G01S7/52017—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00 particularly adapted to short-range imaging
- G01S7/52085—Details related to the ultrasound signal acquisition, e.g. scan sequences
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
- Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
Description
【発明の属する技術分野】
これは、1998年10月1日に出願されたUS特許出願シリアル番号60/102,923号の利益をクレームする1999年6月17日に出願されたUS特許出願シリアル番号09/335,058号の一部のコンティニュエーションである。
【0002】
本発明は、超音波診断イメージングシステム、特に適応して処理される空間的に複合されたイメージを作る超音波診断イメージングシステムに関する。
【0003】
【従来の技術】
米国特許第6,126,598号及び特許出願シリアル番号09/335,058号は、超音波診断イメージの実時間空間的複合を実施するための方法及び装置について述べている。空間的複合は、複数の観察方向又は角度から得られた所与のターゲットの多数の超音波エコーが、各角度から受信された複合イメージ内の各ポイントにおけるデータを結合することにより単一の複合されたイメージに結合される、イメージング技術である。複合されたイメージは、典型的には単一の視点からの従来の超音波イメージよりは低いスペックル及び良好な正反射描写を示す。これら特定された特許は、イメージング条件の関数として結合された異なる観察方向からの信号の数を変えさせるために適応して可変できる空間的複合システムを述べている。例えば、スキャンヘッドの動きが相対的に高いとき、所与の複合イメージのために用いられる観察方向の数が減少する。スキャンヘッドの動きが相対的に静的なとき、観察方向の数が増大する。親の特許明細書においては、浅い深度でイメージングするとき観察方向の数は増大し、深い深度でイメージングするとき減少する。
【0004】
これらの適応技術は、実時間の空間的に複合されたイメージの質を改善するため利用できる。これらの技術がイメージぶれ及び不所望の低いフレームレートのような問題を防ぐからである。特定の診断アプリケーション及びイメージングターゲットに対するイメージの質を改善する他の適当な技術を持つことが、望まれていた。例えば、血管壁のプラークの増強を調べる心臓担当者は、バスキュラ構造を識別するために最適化されたイメージを所望し、これに対し筋肉及び関節損傷を調べる整形担当者は、筋肉組織及び腱を識別するために最適なイメージを欲するだろう。したがって、実施される診断のタイプに対する空間的に複合されたイメージのイメージ品質を最適化でき、適応してそうすることが望まれていた。
【0005】
【課題を解決するための手段】
本発明の原理に従うと、異なる観察方向からの超音波エコーの空間的複合は、エコーデータが結合される態様の変化を適応させて変化させる。一つの側面では、結合するプロセスが、医療従事者によって特定の診断処理の選択に応じて、自動的に選ばれる。別の側面では、結合するプロセスは、受信したエコー信号の特性に応じて動的に可変でき、イメージの異なる領域が異なるプロセスによって選択的に結合できる。一つの実施例では、結合するプロセスの選択は、観察方向を伴うエコーデータのバリエーションの関数である。他の実施例では、結合するプロセスの選択は、イメージプロセッサにより作られた制御信号の関数である。エコーデータの解析からの制御信号は更に、イメージにわたって結合技術を変えるよりもむしろイメージのある特徴を強調するために用いられる。
【0006】
【発明の実施の形態】
最初に図1を参照すると、本発明の原理に従って構築された超音波診断イメージングシステムが示される。アレイトランスデューサ12を含むスキャンヘッド10は、点線長方形及び平行四辺形により示されるイメージフィールドにわたって異なるステアリング角度でビームを送る。走査ラインの3つのグループが図ではA,B,Cで示され、各グループはスキャンヘッドに関係して異なる角度でステアリングされる。ビームの伝送は、既定のステアリング角度で及びアレイに沿って既定の原点から各ビームを伝送するために、アレイトランスデューサの各素子の動作の時間及び位相を制御する送信器14により制御される。各走査ラインに沿ってから戻ったエコーは、アレイの素子により受信され、AD変換によりデジタル化され、デジタルビーム形成器16に結合される。このデジタルビーム形成器は、各走査ラインに沿って焦点合わせされたコヒーレントなデジタルエコーサンプルのシーケンスを形成するためにアレイ素子からのエコーを遅延し加算する。送信器14及びビーム形成器16は、システム制御器18の制御の下操作され、順に超音波システムのユーザにより操作されたユーザインタフェース20の制御の設定に応答する。このシステム制御器は、所望のステアリング角度、送信エネルギ及び周波数で所望の数の走査ライングループを送信するために送信器を制御する。このシステム制御器は、用いられるイメージ深度及びアパーチャに対して受信したエコー信号を適当に遅延し結合するためにデジタルビーム形成器も制御する。
【0007】
走査ラインのエコー信号は、対象となるものの周波数帯域を規定することになるプログラム可能なデジタルフィルタ22によりフィルタリングされる。高次のコントラストエージェントをイメージングするとき又は組織の高次イメージングを実施するとき、フィルタ22の通過帯域は、高次の伝送帯域を通過するように設定される。フィルタリングされた信号は、検出器24により検出される。好ましい実施例においては、フィルタ及び検出器は、複数のフィルタ及び検出器を含むので、受信された信号は、複数の通過帯域に分離され、個別に検出され、周波数複合によってイメージスペックルを低減するように再結合される。Bモードイメージングに対して、検出器24は、エコー信号包絡線の振幅検出を行う。ドップラーイメージングに対して、エコーのアンサンブルは、イメージ内の各ポイントに対してアセンブルされ、ドップラーシフトすなわちドップラーパワー強度を見積もるためにドップラー処理される。エコー信号は、他の信号、及び検出の前又は後で周波数複合又は高次分離のような、イメージ処理を受けてもよい。
【0008】
本発明の原理によると、デジタルエコー信号は、プロセッサ30の空間的複合により処理される。デジタルエコー信号は、プリプロセッサ32により初期的に前処理される。プリプロセッサ32は、重み付け係数が所望されるならば、信号サンプルを前もって重み付けできる。これらサンプルは、特定の複合イメージを形成するために使用されるコンポーネントフレームの数の関数である重み付け係数で前もって重み付けできる。プリプロセッサは、複合されるサンプル又はイメージの数が変化するという遷移を円滑にするために一つの重なるイメージのエッジにあるエッジラインも重み付けできる。前処理された信号サンプルは、リサンプラ34でリサンプリングを受ける。リサンプラ34は、一つのコンポーネントフレームの見積もりを他のコンポーネントフレームの見積もり又はイメージ表示空間のピクセルへ空間的に再調整する。
【0009】
リサンプリングの後で、イメージフレームが結合器36により複合される。結合することは、以下に充分述べられるような、加算、平均化、ピーク検出、又は他の手段を含んでも良い。結合されるサンプルは、処理のこのステップで結合する前に重み付けされても良い。最終的にポスト処理は、ポストプロセッサ38により実施される。このポストプロセッサは、結合された値を表示レンジの値に正規化する。ポスト処理は、ルックアップテーブルにより最も多く容易に実施でき、同時に圧縮し複合された値のレンジを複合されたイメージの表示のために適した値のレンジへマッピングできる。
【0010】
複合する処理は、見積もりデータ空間内又は表示ピクセル空間内で実施される。好ましい実施例では、走査変換は、走査変換器40により複合するプロセスの後でなされる。複合イメージは、見積もり又は表示ピクセル形式の何れかでシネループメモリ42に記憶される。見積もり形式で記憶されるならば、イメージは、表示のためのシネループメモリから再生されるとき走査変換されてもよい。走査変換器及びシネループメモリは、米国特許第5,485,842号及び米国特許第5,860,924号に述べられているような空間的の複合されたイメージの三次元表示を用いても良いし、連続して得られる、横方向に部分的に重なるイメージを重畳することにより、視野が広がったフィールドの表示でもよい。走査変換に続いて、空間的に複合されたイメージは、ビデオプロセッサ44による表示のため処理され、イメージディスプレイ50に表示される。
【0011】
図2は、本発明による結合器36の構成を示す。異なるステアリング角度でのイメージ領域内のポイントからのエコー信号は、可変エコー結合器60及びステアリング角度分析器62に結合される。各ポイントからのエコー信号の角度依存性は、エコーを発生したターゲットのタイプを識別するためにステアリング角度分析器により分析される。ステアリング角度分析器により得られたターゲットのタイプは、複合されるイメージ内のそのポイント、すなわちピクセルに対するエコーデータを結合するために用いられるアルゴリズムを制御するために用いられる。このように、複合されるイメージの各ピクセルに対して用いられた結合の方法は、イメージ領域内のそのポイントに対応するターゲットの特性の関数である。
【0012】
超音波イメージで見られる種々のターゲットに対する入力角度に対する後方散乱振幅の典型的な依存性が、図3に示される。図3の4つのグラフの各々は、7つの異なる入射角αでのインソニフィケーション(insonification)の結果として典型的なターゲットから受信される7つのエコーの後方散乱振幅をプロットする。例えば、図3aは、コヒーレントなスペックルからの結果である7つのエコー110,111、112等を示す。これらエコーは、相対的な振幅で広く分布して見られる。これら振幅の振幅分散分析が、相対的に大きな標準偏差を生む。用いられた分析は複雑であってもよいし、相対的に簡易なアプローチでもよい。純粋なスペックルに対する標準偏差は、1.91であるが、分析されるサンプルの数が相対的に小さいので、より小さな値がしきい値として割り当てられることができ、当該しきい値を超えると分析は識別されるスペックルを持つことが決定される。例えば、エコー値の無作為な分布又は分散は、1.5又はそれより大きい標準偏差を持ち、ステアリング角度分析器はスペックルターゲットであるイメージ内のポイントを決定するだろう。ターゲットのスペックルが独立したステアリング方向の数の平方根により平均化することにより低減されるので、エコー結合器60はエコー値110、111、112等を平均化するために平均化処理を実施する。したがって、スペックル低減が、このイメージポイントでのエコー値の平均化を実施することによりイメージ領域内のこのピクセルに対して起こるだろう。
【0013】
図3bは、振幅の分布又は分散が、相対的に小さい複数のステアリング方向からのポイントから受信されたエコー値120、121、122等を示す。振幅についてのバリエーションがステアリング方向に相対的に敏感でない、このような範囲の値は、典型的にはポイントターゲットから受信されるだろう。0.5のような標準偏差しきい値は、この特性を検出するのに割り当てられ、このしきい値より低い標準偏差がポイントターゲットを示す。この特性に関して選択されたアルゴリズムは、平均化又は最小検出処理であってもよい。
【0014】
図3cは、特別なインソニフィケーション(insonification)方向131に対して明瞭にピークが見えるステアリング角度のエコー値130、131、132等のグループを示す。このような値の分布は、ボディのスペキュラインタフェースのような異方性ターゲットの特徴である。使用されるステアリング角度は、ピーク値を含む分布となるかもしれないし、又は使用されるステアリング角度の範囲外であるピークへ向かう傾向がある値のグループとなるかもしれない。充分なポイントがピークを包含して得られるならば、しきいを設けることによって検出されてもよいし、他には(誤差のマージン内に)2次元の形状を持つ多項式がエコーサンプル値に合うかで特徴が識別されてもよい。異方性ターゲットの識別は、エコー結合器によるピークと最小値と(の差)のアルゴリズム又はピーク検出アルゴリズムによる結合処理となる。
【0015】
最後に、図3dは、ゼロ又はゼロに近い多くの値を含む値のグループを示す。このようなエコー値の分布は、ノイズ特性であり、しきい値Zを設定し値の最小数Wがこのしきい値より低いかどうかを決定することにより、検出される。しきい値Zは、システムのダイナミックレンジに基づくものであり、より大きなダイナミックレンジはより多くのノイズ汚染を示す。ノイズからの結果である値の検出の応答は、エコー結合器によるメディアン、最小−最大、又は最小の値の範囲の使用でもよいし、又は大部分の値がノイズしきい値より低い場合そのイメージ部分にあるピクセル値をゼロに簡単に設定してもよい。他の結合アルゴリズムは、本発明の特別に構築された実施例で実施されてもよい。例えば、所望ならば、相乗平均処理及び/又は最小二乗平均処理が実施されてもよい。
【0016】
図2は、図1の超音波システムのイメージプロセッサ64を示し、超音波システムのデータパスから及びデータパスへの入力66及び出力68により示されるようなシステムの信号処理パスの一部である。イメージプロセッサ64は、エコー結合器により実施されるべき結合処理のタイプを制御するためにエコー結合器60に結合された付加の出力部を持つ。イメージプロセッサ64は、超音波イメージデータ上で実施され、鏡面反射ターゲット、ノイズ、ポイントターゲット、スペックル等のようなイメージ特性を区別するために使用されるフィルタリング又は処理の種類を表す。この決定は、ステアリング角度分析器に対して正に上述したような結合方法を選択するために用いられてもよいし、結合方法を取り上げるためにステアリング角度分析器の出力と組み合わせて用いられてもよい。
【0017】
本発明の1つの実施例では、イメージデータの分析はピクセル毎に実施され、イメージ内の各ピクセルに対して最適化される結合方法の選択となる。所与の複合イメージは、異方性ターゲット、ポイントターゲット、ノイズ及びスペックルからのイメージデータを含み、種々の異なるイメージに依存した結合プロセスは、イメージ全体を通して異なるピクセルに対して使用されてもよい。
【0018】
本発明の他の実施例では、空間的複合のための結合技術は、実施される診断検査のタイプに依存して選択される。例えば、柔らかい組織、すなわち胸部検査の産婦人科検査が実施されるならば、診断の対象は、かなりの頻度で高く減衰するターゲットである。産婦人科検査では、診断者は、胎児内の強く反射する骨に隣接する柔らかい組織を識別しようと努める。胸部検査では、診断者はイメージ内のこれらの音響影像を識別することにより腫瘍を位置決めしようと努める。このように、音響影像を抑圧しようとするよりはむしろ、空間的複合プロセスは、この特性を強調するために使用される。このような場合、ユーザインタフェース20からの診断者の入力による検査タイプの選択は、図2に示されるようにエコー結合器60への制御信号として用いられる。高く減衰するターゲットが調査の対象である、このタイプの検査の選択は、最小検出処理によるエコー結合の選択となり、異なるステアリング角度の最小値を持つエコー信号がイメージ内の各ポイントでのピクセル値に対して用いられる。
【0019】
検査タイプによる結合方法の選択の他の例として、産婦人科検査は、胎児の骨を調べるためになされてもよいし、筋(MUSCULOSKELETAL)検査が腱損傷を診断するためになされてもよいし、又はバスキュラ検査が血管壁のプラークを調べるためになされてもよい。これらの検査においては、調査の対象は、正反射部を含む異方性ターゲットである。このような環境では、検査タイプの選択は、エコー結合器によるピーク検出アルゴリズムの使用となり、これによりピーク振幅を示す異なるステアリング方向のエコーがイメージ内の各ポイントでのピクセル値に対して用いられる。
【0020】
他の例としては、診断者はスペックル又はノイズのようなイメージアーチファクトの最適な低減を所望するので、イメージはできるだけきれいである。これらの場合、このタイプの最適化の診断者による選択は、イメージ内の各ポイントでのエコー結合器による平均化処理の使用となるだろう。
【0021】
本発明の他の実施例では、空間的複合の結合処理を適当に制御するためにイメージデータを使用するよりはむしろ、実施された分析の結果がイメージ内の選択された特徴を特定するか又は強調するように使用される。例えば、診断者は裂かれた又は他の損傷に対する腱を検査していたと仮定する。腱は高い異方性があり、異なる観察角度のビームからの腱により戻されたエコーは、図3cに示されるもののようなマークされたステアリング方向感度を示す。この特性を持つエコーのグループがイメージ内で見つかるとき、イメージのそのポイントが、例えば特定の色付けを当該ポイントに設定することにより強調される。例として、あるしきい値を超えるピーク値を持つピクセルが色づけされてもよいし、さもなければイメージ内で強調されてもよい。他には、ピクセルの使用されるヒュー(色づけ)の量がイメージ内のポイントの角度依存性(異方性)の程度を表すように選ばれてもよい。全体のイメージに対する結合処理は、イメージスペックル及びノイズを低減する平均化のために設定できるし、例えば、所望の特性を表すイメージ内のポイントが所望のヒューで色づけできる。他には、所望の特性を持つイメージ内のポイントがピーク表示のような診断に対する最適な結合方法を用いて強調でき、一方でイメージ内の他のポイントがスペックル及びノイズアーチファクトを低減するために平均化するような異なった結合的な処理がなされる。
【0022】
本発明者は、空間的に複合されるイメージの異なる領域に対して異なる結合のアルゴリズムの使用が、結合方法のあるタイプから別のタイプへ移るところの境界でのアーチファクトが生じえるということを見出した。これらのアーチファクトは、現実には存在しない組織のインタフェース又は境界を診断者が診断してしまうようにする。このようなアーチファクトを低減しほぼ排除するために、処理方法の変化は、段階的に(transitionally)なされる。例えば、図4は、ライン72の右側の構成はピーク検出表示のような結合処理のあるタイプで処理される超音波イメージの領域70を示す。ライン72の左側のイメージ部分は、平均化のような異なる結合方法により処理される。これは、ライン72でイメージ内に明らかな境界を生じうる。このアーチファクトを低減するために、移行結合処理が、ライン72のいずれかの側で用いられる。例えば、ピーク検出表示は、点線76の右側の領域で用いられ、平均化が点線74の左側の領域で用いられ、重み付けされた平均化が2点鎖線の中間領域で用いられる。結合方法の変化は、段階的に又は継続的であってもよい。いずれの場合も、移行処理の使用は、結合処理アーチファクトを低減する。他に、エコーデータを分析する決定処理が、移行処理結果を効果的にするために意図的に「ファジー」に(すなわちある程度大まかに)なされる。
【0023】
図5は、図1の空間的に複合するプロセッサ30の好ましい実施を示す。プロセッサ30は、図1のビーム形成器から受信するエコー信号のコンディショニングを実施する信号プロセッサ72により好ましくは実施される。信号プロセッサ72は、上記プリプロセッサ32でなされるような多くの処理を実施する。エコー信号は、空間的に複合されるイメージ表示のために必要な大部分の処理を実施する、一般的な汎用プロセッサ74に結合される。プロセッサ74はエコーデータをリサンプルし、結合方法を決定するのに必要なエコーデータの分析を実施し、上述の結合処理及びポスト処理を実施できる。空間的に複合されるために用いられる個別の要素イメージ及び全体的に形成される空間的に複合されたイメージは、イメージメモリ76に蓄積される。蓄積されたイメージは、見積もり(R−θ)又はデカルト座標(カルテシアン(Cartesian))空間表記の何れかで蓄積されてよい。走査変換されていないイメージ(アンスキャン(Un-scan)変換イメージ)は、走査変換器40に結合され、必要の際走査変換されたイメージを返す。走査変換されたイメージは、表示のためにビデオプロセッサ44に結合される。本発明は、受信したエコー信号に依存して空間的に複合される要素イメージを適応的に結合するために実時間のイメージングで実施できる一方、同じ技術がポスト処理モードの操作で実施できることが理解されるであろう。例えば、蓄積されたイメージが取り出され、その要素の観察方向のエコーは診断者が特定の診断のために最適化されるイメージを作り出すまで種々の態様で結合的に再処理できる。実時間での受信及び表示の間、平均化により処理されたイメージが取り出され、異なるステアリング方向からのエコーは、より良い表示若しくは強調された所望のイメージ特性又は異なるタイプのイメージ特性への上述の他の結合方法により再処理できる。
【図面の簡単な説明】
【図1】 本発明の原理に従って構築された超音波診断イメージングシステムを表すブロック図を示す。
【図2】図1の結合器の詳細を表すブロック図を示す。
【図3】ステアリング角度の関数として例示的なエコー特性を示す。
【図4】結合するプロセスがイメージ内で変わるとき、生じてしまう境界アーチファクトを示す。
【図5】図1の空間的複合プロセッサの好ましい実施を表すブロック図を示す。
Claims (11)
- 空間的に複合される画像を形成するための超音波診断イメージングシステムであって、イメージ領域内の個々のポイントは複数の異なる観察方向からエコーをリターンすることにより、異なるステアリング方向からの前記イメージ領域内の個々のポイントからエコー信号を受信する受信器と、前記イメージ領域内の個々のポイントからの複数の異なる観察方向から受信された前記エコー信号を解析して複数の結合アルゴリズムのうち一つを選択するように制御信号を作るプロセッサと、前記制御信号に応じてイメージ信号値を作るために、前記イメージ領域内の個々のポイントからの複数の異なる観察方向から受信された前記エコー信号を結合するエコー結合器とを有する超音波診断イメージングシステム。
- 前記複数の結合アルゴリズムは、平均化、最小値検出、ピーク検出、メディアン検出、最小−最大処理、相乗平均処理、最小二乗処理、差分検出、及びゼロ設定を含む、請求項1に記載の超音波診断イメージングシステム。
- 受信器、プロセッサ及びエコー結合器を有する超音波診断イメージングシステムの制御方法であって、前記プロセッサによりイメージ領域内の個々のポイントからの複数の異なる観察方向から前記受信器により受信された前記エコー信号を解析して複数の結合アルゴリズムのうち一つを選択するように制御信号を作成するステップと、前記制御信号に応じてイメージ信号値を作るために、前記イメージ領域内の個々のポイントからの複数の異なる観察方向から受信された前記エコー信号を前記エコー結合器により結合するステップとを有する、方法。
- 解析して前記制御信号を作成するステップは、イメージ領域内の個々のポイントからの複数の異なる観察方向から受信されたエコー信号のしきいレベル、値の一致、ピーク、最小値、分散、分布、及び標準偏差の少なくとも一つを解析するステップを有する、請求項3に記載の方法。
- 前記結合するステップは、前記制御信号に応じて、平均化、最小値検出、ピーク検出、メディアン検出、最小−最大処理、相乗平均処理、最小二乗処理、差分検出、及びゼロ設定のうちの1つを選択するステップを有する、請求項4に記載の方法。
- 前記結合するステップは、イメージのいくつかのイメージ信号値を作る第1の結合アルゴリズムを使用するステップと、前記イメージの残りのイメージ信号値を作る第2の結合アルゴリズムを使用するステップとを有する、請求項3に記載の方法。
- 第2の結合アルゴリズムを使用することは、前記イメージのある信号特性を強調することになる、請求項6に記載の方法。
- 前記結合するステップは、ポイント毎を基にした所与のポイントから戻されたエコー信号に対する結合アルゴリズムを選択することを有する、請求項3に記載の方法。
- 前記結合するステップは、イメージの空間的に隣接するポイントにわたって遷移結合アルゴリズムを利用することを有する、請求項3に記載の方法。
- 前記制御信号に応じてイメージ内のポイントを強調し、当該強調は、前記イメージのポイントにおける強調の量を選択的に変化させる、及び/又は前記イメージ内に選択的に色ポイントを有する、請求項3に記載の方法。
- 強調されるイメージ内のポイントは、特定の結合アルゴリズムにより作られるイメージ信号値に対応する、請求項10に記載の方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US09/770,604 US6547732B2 (en) | 1998-10-01 | 2001-01-26 | Adaptive image processing for spatial compounding |
PCT/IB2002/000119 WO2002059644A1 (en) | 2001-01-26 | 2002-01-17 | Adaptive image processing for spatial compounding |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2004522515A JP2004522515A (ja) | 2004-07-29 |
JP3935433B2 true JP3935433B2 (ja) | 2007-06-20 |
Family
ID=25089127
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002559708A Expired - Fee Related JP3935433B2 (ja) | 2001-01-26 | 2002-01-17 | 空間的複合のための適応画像処理 |
Country Status (6)
Country | Link |
---|---|
US (1) | US6547732B2 (ja) |
EP (1) | EP1358507B1 (ja) |
JP (1) | JP3935433B2 (ja) |
AT (1) | ATE358282T1 (ja) |
DE (1) | DE60219138T2 (ja) |
WO (1) | WO2002059644A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018051040A (ja) * | 2016-09-29 | 2018-04-05 | コニカミノルタ株式会社 | 超音波診断装置および画像合成方法 |
Families Citing this family (50)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6196972B1 (en) * | 1998-11-11 | 2001-03-06 | Spentech, Inc. | Doppler ultrasound method and apparatus for monitoring blood flow |
JP2002257803A (ja) * | 2001-02-28 | 2002-09-11 | Fuji Photo Film Co Ltd | 超音波撮像方法及び超音波撮像装置 |
US20040077946A1 (en) * | 2002-10-15 | 2004-04-22 | Jun Ohmiya | Image processing apparatus, method and program |
US20050053305A1 (en) * | 2003-09-10 | 2005-03-10 | Yadong Li | Systems and methods for implementing a speckle reduction filter |
JP4584927B2 (ja) * | 2003-09-10 | 2010-11-24 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 複数ビームが同時送信される、超音波の空間的コンパウンド |
US7338448B2 (en) * | 2003-11-07 | 2008-03-04 | Ge Medical Systems Global Technology Company, Llc | Method and apparatus for ultrasound compound imaging with combined fundamental and harmonic signals |
US7101336B2 (en) * | 2003-11-25 | 2006-09-05 | General Electric Company | Methods and systems for motion adaptive spatial compounding |
US7104957B2 (en) * | 2003-11-26 | 2006-09-12 | General Electric Company | Methods and systems for angular-dependent backscatter spatial compounding |
US7850611B2 (en) * | 2004-09-20 | 2010-12-14 | Innervision Medical Technologies Inc. | System and methods for improved ultrasound imaging |
US8234923B2 (en) | 2004-09-20 | 2012-08-07 | Innervision Medical Technologies Inc. | Systems and methods for ultrasound imaging |
US7771358B2 (en) * | 2005-05-20 | 2010-08-10 | Spentech, Inc. | System and method for grading microemboli monitored by a multi-gate doppler ultrasound system |
US8162837B2 (en) * | 2005-06-13 | 2012-04-24 | Spentech, Inc. | Medical doppler ultrasound system for locating and tracking blood flow |
WO2007092054A2 (en) | 2006-02-06 | 2007-08-16 | Specht Donald F | Method and apparatus to visualize the coronary arteries using ultrasound |
EP2088932B1 (en) | 2006-10-25 | 2020-04-08 | Maui Imaging, Inc. | Method and apparatus to produce ultrasonic images using multiple apertures |
US20080208061A1 (en) * | 2007-02-23 | 2008-08-28 | General Electric Company | Methods and systems for spatial compounding in a handheld ultrasound device |
US9788813B2 (en) | 2010-10-13 | 2017-10-17 | Maui Imaging, Inc. | Multiple aperture probe internal apparatus and cable assemblies |
US9282945B2 (en) * | 2009-04-14 | 2016-03-15 | Maui Imaging, Inc. | Calibration of ultrasound probes |
US9339256B2 (en) | 2007-10-01 | 2016-05-17 | Maui Imaging, Inc. | Determining material stiffness using multiple aperture ultrasound |
EP2365779A1 (en) * | 2008-11-11 | 2011-09-21 | Koninklijke Philips Electronics N.V. | Ultrasonic lesion identification using temporal parametric contrast images |
EP2419022B1 (en) | 2009-04-14 | 2019-11-06 | Maui Imaging, Inc. | Multiple aperture ultrasound array alignment fixture |
KR101121267B1 (ko) * | 2009-09-02 | 2012-03-23 | 삼성메디슨 주식회사 | 스티어링 각도를 고려하여 합성영상을 제공하는 초음파 시스템 및 방법 |
JP6274724B2 (ja) | 2010-02-18 | 2018-02-07 | マウイ イマギング,インコーポレーテッド | 多開口超音波撮像を用いた点音源送信及び音速補正 |
JP6258286B2 (ja) * | 2010-07-02 | 2018-01-10 | 東芝メディカルシステムズ株式会社 | 超音波診断装置、画像処理装置、及び制御プログラム |
JP2012030048A (ja) * | 2010-07-02 | 2012-02-16 | Toshiba Corp | 超音波診断装置、画像処理装置、及び解析プログラム |
US8343054B1 (en) * | 2010-09-30 | 2013-01-01 | Hitachi Aloka Medical, Ltd. | Methods and apparatus for ultrasound imaging |
EP3563768A3 (en) | 2010-10-13 | 2020-02-12 | Maui Imaging, Inc. | Concave ultrasound transducers and 3d arrays |
US8348848B1 (en) * | 2010-11-04 | 2013-01-08 | Hitachi Aloka Medical, Ltd. | Methods and apparatus for ultrasound imaging |
WO2013082455A1 (en) | 2011-12-01 | 2013-06-06 | Maui Imaging, Inc. | Motion detection using ping-based and multiple aperture doppler ultrasound |
WO2013101988A1 (en) | 2011-12-29 | 2013-07-04 | Maui Imaging, Inc. | M-mode ultrasound imaging of arbitrary paths |
JP5272084B2 (ja) * | 2012-01-11 | 2013-08-28 | 日立アロカメディカル株式会社 | 超音波診断装置 |
US8891840B2 (en) | 2012-02-13 | 2014-11-18 | Siemens Medical Solutions Usa, Inc. | Dynamic steered spatial compounding in ultrasound imaging |
IN2014DN07243A (ja) | 2012-03-26 | 2015-04-24 | Maui Imaging Inc | |
JP5987548B2 (ja) * | 2012-08-10 | 2016-09-07 | コニカミノルタ株式会社 | 超音波画像診断装置及び超音波画像診断装置の制御方法 |
JP6270843B2 (ja) | 2012-08-10 | 2018-01-31 | マウイ イマギング,インコーポレーテッド | 多数開口超音波プローブの校正 |
IN2015DN00764A (ja) | 2012-08-21 | 2015-07-03 | Maui Imaging Inc | |
US20140081139A1 (en) * | 2012-09-17 | 2014-03-20 | U-Systems, Inc | Selectably compounding and displaying breast ultrasound images |
JP6000196B2 (ja) * | 2012-09-27 | 2016-09-28 | 富士フイルム株式会社 | 超音波診断装置、音速決定方法およびプログラム |
JP5946427B2 (ja) * | 2012-09-28 | 2016-07-06 | 富士フイルム株式会社 | 超音波検査装置、超音波検査方法、プログラム及び記録媒体 |
US9510806B2 (en) | 2013-03-13 | 2016-12-06 | Maui Imaging, Inc. | Alignment of ultrasound transducer arrays and multiple aperture probe assembly |
RU2650738C2 (ru) * | 2013-03-25 | 2018-04-17 | Конинклейке Филипс Н.В. | Ультразвуковая диагностическая система визуализации с пространственным составлением трапецеидального сектора |
JP6415852B2 (ja) * | 2013-07-12 | 2018-10-31 | キヤノンメディカルシステムズ株式会社 | 超音波診断装置、医用画像処理装置及び医用画像処理方法 |
JP2015077393A (ja) * | 2013-09-10 | 2015-04-23 | セイコーエプソン株式会社 | 超音波測定装置、超音波画像装置、及び超音波測定方法 |
US9883848B2 (en) | 2013-09-13 | 2018-02-06 | Maui Imaging, Inc. | Ultrasound imaging using apparent point-source transmit transducer |
EP3001223A1 (en) * | 2013-09-25 | 2016-03-30 | CureFab Technologies GmbH | Method for detecting and correcting artifacts in ultrasound imaging data |
CN106794007B (zh) | 2014-08-18 | 2021-03-09 | 毛伊图像公司 | 基于网络的超声成像系统 |
KR102582540B1 (ko) * | 2015-06-16 | 2023-09-25 | 삼성메디슨 주식회사 | 초음파 장치 및 그 동작 방법 |
EP3408037A4 (en) | 2016-01-27 | 2019-10-23 | Maui Imaging, Inc. | ULTRASONIC IMAGING WITH DISTRIBUTED NETWORK PROBES |
JP6213635B2 (ja) * | 2016-08-12 | 2017-10-18 | コニカミノルタ株式会社 | 超音波画像診断装置及び超音波画像診断装置の制御方法 |
JP6629492B2 (ja) | 2016-11-29 | 2020-01-15 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 超音波イメージングシステム及び方法 |
EP3642791A1 (en) | 2017-06-22 | 2020-04-29 | Koninklijke Philips N.V. | Methods and system for compound ultrasound image generation |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4561019A (en) * | 1983-05-16 | 1985-12-24 | Riverside Research Institute | Frequency diversity for image enhancement |
CA1242267A (en) * | 1984-09-25 | 1988-09-20 | Rainer Fehr | Real time display of an ultrasonic compound image |
US4751846A (en) | 1985-10-16 | 1988-06-21 | Kontron Holding A.G. | Reducing noise in ultrasonic images |
US5339815A (en) * | 1992-12-22 | 1994-08-23 | Cornell Research Foundation, Inc. | Methods and apparatus for analyzing an ultrasonic image of an animal or carcass |
US5485842A (en) * | 1994-11-30 | 1996-01-23 | Advanced Technology Laboratories, Inc. | Ultrasonic diagnostic scan conversion for three dimensional display processing |
US5538004A (en) | 1995-02-28 | 1996-07-23 | Hewlett-Packard Company | Method and apparatus for tissue-centered scan conversion in an ultrasound imaging system |
US5782766A (en) | 1995-03-31 | 1998-07-21 | Siemens Medical Systems, Inc. | Method and apparatus for generating and displaying panoramic ultrasound images |
US5655535A (en) | 1996-03-29 | 1997-08-12 | Siemens Medical Systems, Inc. | 3-Dimensional compound ultrasound field of view |
US5575286A (en) | 1995-03-31 | 1996-11-19 | Siemens Medical Systems, Inc. | Method and apparatus for generating large compound ultrasound image |
US5566674A (en) | 1995-06-30 | 1996-10-22 | Siemens Medical Systems, Inc. | Method and apparatus for reducing ultrasound image shadowing and speckle |
US5860924A (en) * | 1996-11-26 | 1999-01-19 | Advanced Technology Laboratories, Inc. | Three dimensional ultrasonic diagnostic image rendering from tissue and flow images |
US6126598A (en) | 1998-10-01 | 2000-10-03 | Atl Ultrasound, Inc. | Ultrasonic diagnostic imaging system with adaptive spatial compounding |
US6283917B1 (en) * | 1998-10-01 | 2001-09-04 | Atl Ultrasound | Ultrasonic diagnostic imaging system with blurring corrected spatial compounding |
US6210328B1 (en) * | 1998-10-01 | 2001-04-03 | Atl Ultrasound | Ultrasonic diagnostic imaging system with variable spatial compounding |
US6162176A (en) * | 1998-12-31 | 2000-12-19 | General Electric Company | Ultrasound color flow display optimization |
-
2001
- 2001-01-26 US US09/770,604 patent/US6547732B2/en not_active Expired - Fee Related
-
2002
- 2002-01-17 DE DE60219138T patent/DE60219138T2/de not_active Expired - Fee Related
- 2002-01-17 EP EP02734876A patent/EP1358507B1/en not_active Expired - Lifetime
- 2002-01-17 AT AT02734876T patent/ATE358282T1/de not_active IP Right Cessation
- 2002-01-17 JP JP2002559708A patent/JP3935433B2/ja not_active Expired - Fee Related
- 2002-01-17 WO PCT/IB2002/000119 patent/WO2002059644A1/en active IP Right Grant
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018051040A (ja) * | 2016-09-29 | 2018-04-05 | コニカミノルタ株式会社 | 超音波診断装置および画像合成方法 |
US11311276B2 (en) | 2016-09-29 | 2022-04-26 | Konica Minolta, Inc. | Ultrasonic diagnostic apparatus and image synthesis method |
Also Published As
Publication number | Publication date |
---|---|
DE60219138D1 (de) | 2007-05-10 |
DE60219138T2 (de) | 2008-01-10 |
ATE358282T1 (de) | 2007-04-15 |
WO2002059644A1 (en) | 2002-08-01 |
US20010014773A1 (en) | 2001-08-16 |
US6547732B2 (en) | 2003-04-15 |
EP1358507A1 (en) | 2003-11-05 |
EP1358507B1 (en) | 2007-03-28 |
JP2004522515A (ja) | 2004-07-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3935433B2 (ja) | 空間的複合のための適応画像処理 | |
EP1188068B1 (en) | Method and apparatus for flash suppression in two-dimensional ultrasound imaging | |
JP4722283B2 (ja) | 連続データ獲得を用いた超音波フロー・イメージングにおける運動の可視化のための方法および装置 | |
EP1579244B1 (en) | Segmentation tool for identifying flow regions in an imaging system | |
US6406430B1 (en) | Ultrasound image display by combining enhanced flow imaging in B-mode and color flow mode | |
JP4694692B2 (ja) | 可変空間合成を備える超音波診断イメージングシステム | |
US11238562B2 (en) | Ultrasound system with deep learning network for image artifact identification and removal | |
JP3696763B2 (ja) | 超音波撮影装置 | |
JP4627366B2 (ja) | パケット・データ獲得を用いた超音波フロー撮像における運動の可視化のための方法および装置 | |
US6544177B1 (en) | Ultrasonic diagnostic imaging system and method with harmonic spatial compounding | |
WO1998046139A1 (en) | Ultrasound imaging enhancement methods and systems | |
JP3397748B2 (ja) | カラードップラー映像システムにおけるカラー映像表示方法及び装置 | |
US5065763A (en) | Combined reflection and transmssion untrasonic imaging method and apparatus | |
JP4712931B2 (ja) | パワー・ドップラー・イメージの最適データ・マッピングのための方法および装置 | |
US6059729A (en) | Method and apparatus for edge enhancement in ultrasound imaging | |
JP2007513727A (ja) | 空間合成による超音波診断造影画像 | |
JP4917259B2 (ja) | 角度依存型後方散乱空間合成のための方法及びシステム | |
US6135962A (en) | Method and apparatus for adaptive filtering by counting acoustic sample zeroes in ultrasound imaging | |
JP3977779B2 (ja) | 超音波診断装置 | |
JP4746758B2 (ja) | Bモード及びカラー・フロー・モードでの強化された流れ撮像を結合することによる超音波画像表示 | |
JPH1156847A (ja) | 超音波診断装置 | |
JPH06114058A (ja) | 超音波診断装置及び超音波プローブの走査方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20041021 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050114 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20060113 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060124 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060424 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060718 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20061013 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20061020 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070118 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070220 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070319 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |