JP4768622B2 - 反復データ再構成方法及び装置 - Google Patents

反復データ再構成方法及び装置 Download PDF

Info

Publication number
JP4768622B2
JP4768622B2 JP2006534860A JP2006534860A JP4768622B2 JP 4768622 B2 JP4768622 B2 JP 4768622B2 JP 2006534860 A JP2006534860 A JP 2006534860A JP 2006534860 A JP2006534860 A JP 2006534860A JP 4768622 B2 JP4768622 B2 JP 4768622B2
Authority
JP
Japan
Prior art keywords
data
filtering
difference
projections
projection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2006534860A
Other languages
English (en)
Other versions
JP2007508093A (ja
Inventor
ニールセン,ティム
ケーラー,トーマス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV, Koninklijke Philips Electronics NV filed Critical Koninklijke Philips NV
Publication of JP2007508093A publication Critical patent/JP2007508093A/ja
Application granted granted Critical
Publication of JP4768622B2 publication Critical patent/JP4768622B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • G06T11/006Inverse problem, transformation from projection-space into object-space, e.g. transform methods, back-projection, algebraic methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2211/00Image generation
    • G06T2211/40Computed tomography
    • G06T2211/424Iterative

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Mathematical Optimization (AREA)
  • Mathematical Analysis (AREA)
  • Pure & Applied Mathematics (AREA)
  • Algebra (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Processing (AREA)
  • Error Detection And Correction (AREA)
  • Ultra Sonic Daignosis Equipment (AREA)

Description

本発明は、例えば、コンピュータ断層撮影における反復データ再構成の分野に関する。本発明は、特に、画像処理装置及び画像処理装置のためのコンピュータプログラムに対して反復データ再構成を実行する方法に関する。
反復方法は、例えば、原子物理学及びコンピュータ断層撮影等の種々のデータ処理の分野におけるデータ再構成のために用いられる。特に、反復アルゴリズムは画像再構成に適用される。再構成処理は交互の投影段階及び逆投影段階を有する。専用の画像再構成ハードウェアを効率的に用いるために、複数の投影/逆投影は同時に実行される必要がある。既知の方法においては、例えば、欧州特許第0502187号明細書又は米国特許第6,574,299号明細書に記載されているように、そのような画像再構成は、尚も長い処理時間を必要とする。特に、同時に実行される複数の投影/逆投影の適用は、同時に処理されるデータ間のために、遅い収束に、従って、低画像品質に繋がる可能性がある。
欧州特許第0502187号明細書 米国特許第6,574,299号明細書
本発明の目的は改善された反復データ再構成を提供することである。
請求項1に記載の本発明の実施形態に従って、上記の目的は反復データ再構成を実行する方法により達成され、予測投影データは複数の投影のために予測データから決定される。次いで、予測データと測定データとの間の差分が決定される。次いで、本発明の特徴に従って、その差分のフィルタリングが実行され、その結果、フィルタリングされた差分が得られる。次いで、逆投影が、そのフィルタリングされた差分を用いることにより予測データを更新することによって実行される。それらの段階は反復して実行されることが可能である。
フィルタリング段階のために、逆投影を実行する前に、その差分は適合又は操作される。これは、処理速度の改善、即ち、処理時間の短縮を可能にする。それ故、例えば、その方法が画像の再構成に適用される場合、画像品質の改善を達成することが可能である。
請求項2に記載の本発明の他の例示としての実施形態に従って、フィルタリングは、複数の投影の相互の影響又は相互作用が少なくとも部分的にフィルタリングして除去されるように、実行される。換言すれば、このような本発明の例示としての実施形態に従って、他の投影によりもたらされる投影の影響が前の逆投影に対して補償されるように、差分は修正される。
有利であることに、そのようなフィルタリングステップの導入のために、このような本発明の例示としての実施形態に従った方法は、例えば、専用の画像生構成ハードウェアにおいて効率的に実行されることが可能であり、幾つかの投影/逆投影を同時に実行することを可能にし、処理時間の短縮を可能にする。
請求項3に記載の本発明の他の例示としての実施形態に従った方法は、適切な再構成技術(ART)に基づいている。
請求項5乃至7は、本発明に従った方法の更なる例示としての実施形態を提供する。
請求項8に記載の本発明の他の例示としての実施形態に従って、例えば、ARTに類似する反復データ再構成を実行し、逆投影の前にフィルタリングを有し、処理時間の短縮を可能にする一方、更に高い再構成品質を可能にする画像処理装置を提供する。
本発明は又、例えば、フィルタリング段階を有する逆データ再構成を実行するために、画像処理装置のためのコンピュータプログラムに関する。本発明に従ったコンピュータプログラムについては、請求項9に記載されている。本発明に従ったコンピュータプログラムは、好適には、データ処理器の作業用メモリにロードされる。データ処理器は、それ故、本発明の方法を実行するように備えられる。コンピュータプログラムは、例えば、CD−ROMのようなコンピュータ読み取り可能媒体に記憶されることが可能である。コンピュータプログラムは又、WWW(World−Wide−Web)等のネットワークに対して供給されることが可能であり、そのようなネットワークからデータ処理器の作業用メモリにダウンロードされることが可能である。
フィルタリング段階がART又は同時ART(SART)のような反復データ再構成に導入されることは、本発明の例示としての実施形態の要点であるとして理解できる。ARTについては、例えば、文献、“Algegraic reconstruction techniques (ART) for three−dimensional electron microscopy and x−ray photography”,by R.Gorden et.al.,J.Theor Biol,Vol.29, pages 471 to 481,1970に記載されていて、その文献の援用により本発明の説明の一部を代替する。SARTについては、例えば、文献“Simulataneous algebraic reconstruction technique(SART)”,by R.H.Andersen et al,Ultrasonic imaging,Vol.6,pages 81 to 94,1994に記載されていて、その文献の援用により本発明の説明の一部を代替する。本発明に従って実行されるフィルタリングは、現投影に他の投影によりもたらされる影響をフィルタリングにより除去することが可能であり、そのことは、データ再構成の品質を改善することを可能にし、即ち、画像が再構成される場合、画像品質の改善を可能にする。更に、本発明に従って、幾つかの投影/逆投影が同時に実行されることが可能であり、高処理速度を可能にする。
本発明の以上の及び他の特徴について、以下、実施形態に関連して詳述し、明らかにする。
本発明の例示としての実施形態について、以下、図面を参照して詳述する。
図1は、本発明に従った方法の例示としての実施形態を実行するための、本発明に従った画像処理装置の例示としての実施形態を示している。図1に示す画像処理装置は、投影データ及び反復データ再構成中に生成されたデータを記憶するためのメモリ2に接続された中央演算処理装置(CPU)又は画像処理器1を有する。画像処理器1は、例えば、MR装置又はCT装置等の複数の入力/出力ネットワーク装置又は診断装置に接続されることが可能である。画像処理器1は、画像処理器1において演算又は適合される情報又は画像を表示するための表示装置4(例えば、コンピュータモニタ)に更に接続される。オペレータは、キーボード5及び/又は図1に示していない他の装置により画像処理器1と双方向的対話を行うことが可能である。
図1に示す画像処理装置は、ART再構成技術に基づいて動作されることが可能である。
本発明に従って用いられるARTの基本概念は、連続的なオブジェクト関数の離散的表現Iを用いること及びその関数から投影データを演算することである。演算された投影データと測定データとの間に差分が存在する場合、Iは修正される。
測定された投影データpがX個のビューp,...,pを有すると仮定する。
1つの反復段階
Figure 0004768622
は次のような2つの演算を有する。
1: 所定のビューn(k)に対して、投影データp´が予測画像Iから演算され、測定データpn(k)と比較される。投影は次式で表される。
p´=pn(k)
個々で、pn(k)はビューn(k)についての投影演算子である。
2: 予測画像は、測定された投影と演算された投影との間の観測される差分に応じて更新され、その結果、新しい予測画像Ik+1が得られる。逆投影は次式で表される。
k+1=I+λn(k)・Bn(k)(pn(k)−p´)
ここで、Bn(k)はビュー(k)についての逆投影演算子である。
nは、異なるビューからの投影データが処理される(即ち、
Figure 0004768622
)シーケンスである。λは、どれ位の観測された差分が新しい画像に逆投射されるかを制御する重み付け因子である。
ARTの短所は、演算労力が非常に多いことである。これは、例えば、幾つかの投影/逆投影を同時に演算することができる専用CPU等の専用画像再構成ハードウェアを用いることにより克服することが可能である。ARTにおける一反復段階は一対の投影/逆投影を有するため、ARTは幾つかの投影を同時に用いるように修正される必要がある。これは、図1に示す画像処理装置を動作させるために用いられることが可能である、同時の代数的再構成技術(SART)に繋がる。
SARTにおいては、M個の投影/逆投影が、次のように、各々の反復段階
Figure 0004768622
において同時に処理される。
1: 処理データp´は予測画像Iから演算され、全てのj∈[0,...,M−1]について測定データpn(k+j)と比較される。投影は次式で表される。
p´=pn(k+j)∈[0,...,M−1]
ここで、Δ=λn(k+j)(pn(k+j)−p´)であると仮定する。
2: 予測画像は、測定投影と演算投影との間の観測された差分に応じて更新され、その結果、新しい予測画像Ik+Mが得られる。ここで、逆投影は次式で表される。
Figure 0004768622
逆投影段階における係数1/Mは、異なる角度からの投影がオブジェクトに関する同じ情報を有するということによるものである。例えば、全ての投影はオブジェクトのdc値(全体の平均値)を有する。係数1/Mはdc成分について適切である一方、高周波数成分については大き過ぎる。これは遅い収束に繋がる。
本発明の好適な実施形態に従って、図1に示す画像処理装置は、下で、フィルタリングSARTと呼ばれる、下の動作方法を実行するように適合される。
このような本発明の例示としての実施形態に従って、逆投影の前に実行されるフィルタリング段階が導入される。有利であることに、そのフィルタリングは、複数の投影の相互の影響がフィルタリング除去されるように適合されることが可能であり、それ故、画像品質の改善を可能にする。換言すれば、同時に与えられるデータの間の相互関係のための遅い収束は非常に改善されることが可能であり、それ故、画像品質が改善されることが可能である。本発明の例示としての実施形態に従って、フィルタリングされるSARTについて、次のように表すことが可能である。
段階1: 投射
投射データp´は予測画像Iから演算され、全てのj∈[0,...,M−1]について測定データpn(k+j)と比較される。投影は次式で表される。
p´=pn(k+j)∈[0,...,M−1]
ここで、Δ=λn(k+j)(pn(k+j)−p´)であると仮定する。
段階2: フィルタリング
Figure 0004768622
及び
Figure 0004768622
であると仮定する。
フィルタリングされるSARTの一段階はARTにおけるM個の段階と同じ結果を与えることが理解できる。
段階2から理解できるように、フィルタリングは、現角度の投影と前角度の逆投影の積算との積が差分画像
Figure 0004768622
から減算される。有利であることに、上記のように、これは、現投影における他の投影の影響をフィルタリング除去することを可能にする。
上記のフィルタリング段階はPのタイプの演算を含む。これは投影空間から投影空間へのマッピングであることに留意する必要がある。結合された演算は分解して表され、第2段階において離散化される。これは、段階2における逆投影演算及び投影演算は、段階1及び段階3とは対照的に、それ自体、実行される必要がないことを意味している。それに代えて、非常に簡単な結合演算Pのみが実行される必要がある。
システムの幾何学的構成に依存して、他の単純化が適用され、例えば、CTシステムにおいては、Pはi−jのみに依存することは明らかである。
図2乃至4は、本発明に従ったART、SART及びフィルタリングSARTを用いて再構成されたFORBIRD胸部ファントム(ハンスフィールドユニット、レベル=0、ウィンドウ=400)の画像を示している。全ての画像は、λ=1の一定値を有する1つの反復の結果である。図2は、ARTの1つの反復により再構成された胸部ファントムを示している。図3は、M=32についてのSART(左)とフィルタリングSART(右)の比較を示している。図4は、M=64についてのSART(左)とフィルタリングSART(右)の比較を示している。
特に、図3及び4の左側のSART画像から理解できるように、SART画像の画像品質は、図2に示すART画像の画像品質より低い。これは、内輪の1/Mの更新重み付けによるものである。他方、図3及び4の右側のフィルタリングART画像から理解できるように、図2に示すART画像に比べて、フィルタリングSART画像は実質的に同じ画像を有する又は更に改善された画像品質を有することが可能である。
上で図示したように、上記の画像処理装置及び反復データ再構成を実行する方法を、特に、コンピュータ断層撮影に適用することが可能である。しかしながら、それを又、核磁気イメージング又はX線イメージングに適用することが可能である。
本発明の例示としての実施形態に従った方法を実行するように適合された、本発明の例示としての実施形態に従った画像処理装置の模式図である。 λ=1であるARTの1つの反復により再構成された胸部ファントムを示す図である。 M=32(1つの反復、λ=1)についてのSART(左)と本発明の例示としての実施形態に従って実行された再構成(右)との比較を示す図であり、ここで、Mは同時に処理されたビューの数である。 M=64(1つの反復、λ=1)についてのSART(左)と本発明の例示としての実施形態に従って実行された再構成(右)との他の比較を示す図である。

Claims (7)

  1. 反復データ再構成を実行する方法であって:
    (a)数の投影のために予測画像データから影データを決定する段階;
    (b)前記決定された投影データと測定された投影データとの間の差分を決定する段階;
    (c)フィルタリング差分をもたらす前記差分のフィルタリングを実行する段階であって、前記フィルタリングは、複数の投影の相互の影響が少なくとも一部をフィルタリング除去されるように実行されるところの段階;及び
    (d)前記フィルタリング差分を用いることにより前記予測画像データを更新することによって逆投影を実行する段階;
    を有することを特徴とする方法。
  2. 請求項1に記載の方法であって、代数的再構成技術に基づいている、ことを特徴とする方法。
  3. 請求項1に記載の方法であって、段階(a)、(b)、(c)及び(d)の少なくとも1つは前記複数の投影の少なくとも2つの投影について同時に実行される、ことを特徴とする方法。
  4. 請求項1に記載の方法であって、前記フィルタリング差分を決定するために、現角度の投影と前角度の逆投影の積算との積は前記差分から減算される、ことを特徴とする方法。
  5. 請求項1に記載の方法であって、コンピュータ断層撮影に適用される、ことを特徴とする方法。
  6. 画像処理装置であって:
    測定された投影データと反復データ再構成において生成されたデータとを記憶するためのメモリ;及び
    前記反復データ再構成を実行するための画像処理器;
    を有
    前記画像処理器は:
    (a)複数の投影のために予測画像データから投影データを決定する段階;
    (b)前記決定された投影データと測定された投影データとの間の差分を決定する段階;
    (c)フィルタリング差分をもたらす前記差分のフィルタリングを実行する段階であって、前記フィルタリングは、複数の投影の相互の影響が少なくとも一部をフィルタリング除去されるように実行されるところの段階;及び
    (d)前記フィルタリング差分を用いることにより前記予測画像データを更新することによって逆投影を実行する段階;
    を有する操作を実行するように適合されている、ことを特徴とする画像処理装置。
  7. 処理器を有する画像処理装置のためのコンピュータプログラムであって、前記コンピュータプログラムは、前記コンピュータプログラムが前記処理器において実行されるときに、前記処理器が、次の操作、即ち:
    (a)複数の投影のために予測画像データから投影データを決定する段階;
    (b)前記決定された投影データと測定された投影データとの間の差分を決定する段階;
    (c)フィルタリング差分をもたらす前記差分のフィルタリングを実行する段階であって、前記フィルタリングは、複数の投影の相互の影響が少なくとも一部をフィルタリング除去されるように実行されるところの段階;及び
    (d)前記フィルタリング差分を用いることにより前記予測画像データを更新することによって逆投影を実行する段階;
    を実行するようにすることを特徴とする、コンピュータプログラム。
JP2006534860A 2003-10-14 2004-10-04 反復データ再構成方法及び装置 Active JP4768622B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP03103790 2003-10-14
EP03103790.6 2003-10-14
PCT/IB2004/051962 WO2005036466A1 (en) 2003-10-14 2004-10-04 Iterative data reconstruction

Publications (2)

Publication Number Publication Date
JP2007508093A JP2007508093A (ja) 2007-04-05
JP4768622B2 true JP4768622B2 (ja) 2011-09-07

Family

ID=34429485

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006534860A Active JP4768622B2 (ja) 2003-10-14 2004-10-04 反復データ再構成方法及び装置

Country Status (6)

Country Link
US (1) US7430269B2 (ja)
EP (1) EP1676242B1 (ja)
JP (1) JP4768622B2 (ja)
AT (1) ATE463808T1 (ja)
DE (1) DE602004026460D1 (ja)
WO (1) WO2005036466A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102005050917A1 (de) 2005-10-24 2007-04-26 Siemens Ag Verfahren und Tomographiegerät zur Rekonstruktion einer tomographischen Darstellung eines Objektes
US20090046907A1 (en) * 2007-08-17 2009-02-19 Siemens Medical Solutions Usa, Inc. Parallel Execution Of All Image Processing Workflow Features
DE102009014726A1 (de) * 2009-03-25 2010-10-07 Siemens Aktiengesellschaft Verfahren und Bildrekonstruktionseinrichtung zur Rekonstruktion von Bilddaten
CN103797517B (zh) 2011-09-12 2018-06-12 皇家飞利浦有限公司 针对有限角度断层摄影中的滤波反投影的图像重建的方法、计算设备、装置和可读介质
JP6160501B2 (ja) 2014-02-12 2017-07-12 豊田合成株式会社 半導体装置の製造方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6017568A (ja) * 1983-07-11 1985-01-29 Hitachi Ltd 画像処理方法および装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4633398A (en) * 1983-12-07 1986-12-30 General Electric Company Attenuation compensated emission reconstruction with simultaneous attenuation factor evaluation
US5253171A (en) 1990-09-21 1993-10-12 General Electric Company Parallel processing method and apparatus based on the algebra reconstruction technique for reconstructing a three-dimensional computerized tomography (CT) image from cone beam projection data
US5909476A (en) * 1997-09-22 1999-06-01 University Of Iowa Research Foundation Iterative process for reconstructing cone-beam tomographic images
JP3707347B2 (ja) * 2000-04-07 2005-10-19 株式会社島津製作所 X線ct装置の画像処理方法及びx線ct装置並びにx線ct撮影用記録媒体
US6574299B1 (en) 2001-08-16 2003-06-03 University Of Central Florida Exact filtered back projection (FBP) algorithm for spiral computer tomography
US6768782B1 (en) * 2002-12-16 2004-07-27 University Of Notre Dame Du Lac Iterative method for region-of-interest reconstruction
US6987829B2 (en) * 2003-09-16 2006-01-17 General Electric Company Non-iterative algebraic reconstruction technique for tomosynthesis

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6017568A (ja) * 1983-07-11 1985-01-29 Hitachi Ltd 画像処理方法および装置

Also Published As

Publication number Publication date
EP1676242B1 (en) 2010-04-07
EP1676242A1 (en) 2006-07-05
US20070053556A1 (en) 2007-03-08
JP2007508093A (ja) 2007-04-05
DE602004026460D1 (de) 2010-05-20
US7430269B2 (en) 2008-09-30
WO2005036466A1 (en) 2005-04-21
ATE463808T1 (de) 2010-04-15

Similar Documents

Publication Publication Date Title
Zhang et al. MetaInv-Net: Meta inversion network for sparse view CT image reconstruction
Dong et al. X-ray CT image reconstruction via wavelet frame based regularization and Radon domain inpainting
JP4468353B2 (ja) 管状組織の三次元モデリングのための方法
JP6026214B2 (ja) 連続マルチスケール再構成において詳細画像を補うx線コンピュータ断層撮像装置(x線ct装置)、医用画像処理装置及び医用画像処理方法
JP2720894B2 (ja) 画像再投影方法及び装置
JP2007117740A (ja) 対象の断層撮影画像の再構成方法および断層撮影装置
JP5711241B2 (ja) コーンビームct画像におけるアーチファクト低減のための方法
JP6497912B2 (ja) 画像処理装置、放射線撮影システム、制御方法、及びプログラム
JP2008532683A (ja) 断層画像の反復再構成のための方法及び装置
Mao et al. Development and optimization of regularized tomographic reconstruction algorithms utilizing equally-sloped tomography
JPH09138853A (ja) 画像データ処理方法および画像データ処理装置
JP6505513B2 (ja) X線コンピュータ断層撮像装置及び医用画像処理装置
JP4409671B2 (ja) 断層写真画像を作る装置と方法
KR101460615B1 (ko) 다중 파장의 엑스선 투과 영상으로부터 단면 영상을 복원하는 방법 및 그 방법을 이용한 영상 처리 장치
JP4768622B2 (ja) 反復データ再構成方法及び装置
Friot et al. Iterative tomographic reconstruction with TV prior for low-dose CBCT dental imaging
JP6423094B2 (ja) 画像診断装置,及び方法
EP3752062B1 (en) Apparatus for iterative material decomposition of multispectral data
JP6699482B2 (ja) 逐次近似画像再構成方法、逐次近似画像再構成プログラムおよび断層撮影装置
US20210282733A1 (en) Edge noise reduction
Li et al. Robust frame based X-ray CT reconstruction
Islam et al. A Critical Survey on Developed Reconstruction Algorithms for Computed Tomography Imaging from a Limited Number of Projections
CN112017256B (zh) 在线ct图像质量自由定制方法及计算机可读存储介质
US20230274473A1 (en) Artificial intelligence based 3d reconstruction
Nguyen et al. Statistical Penalized-likelihood CT Image Reconstruction with Plug-and-play Priors

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20071003

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100325

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100330

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100630

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100727

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101027

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110524

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110616

R150 Certificate of patent or registration of utility model

Ref document number: 4768622

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140624

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250