JP4744883B2 - 画像位置合わせ方法及び医用画像データ処理装置 - Google Patents
画像位置合わせ方法及び医用画像データ処理装置 Download PDFInfo
- Publication number
- JP4744883B2 JP4744883B2 JP2004566182A JP2004566182A JP4744883B2 JP 4744883 B2 JP4744883 B2 JP 4744883B2 JP 2004566182 A JP2004566182 A JP 2004566182A JP 2004566182 A JP2004566182 A JP 2004566182A JP 4744883 B2 JP4744883 B2 JP 4744883B2
- Authority
- JP
- Japan
- Prior art keywords
- parameter set
- image data
- transformation parameter
- partial volume
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 32
- 238000012545 processing Methods 0.000 title claims description 14
- 230000009466 transformation Effects 0.000 claims description 52
- 238000006243 chemical reaction Methods 0.000 claims description 4
- 238000002591 computed tomography Methods 0.000 claims description 4
- 238000004590 computer program Methods 0.000 claims description 3
- 238000003709 image segmentation Methods 0.000 claims description 3
- 238000003384 imaging method Methods 0.000 claims description 3
- 230000004044 response Effects 0.000 claims description 3
- 238000002599 functional magnetic resonance imaging Methods 0.000 claims description 2
- 238000002595 magnetic resonance imaging Methods 0.000 claims description 2
- 238000002603 single-photon emission computed tomography Methods 0.000 claims description 2
- 238000003325 tomography Methods 0.000 claims description 2
- 238000013480 data collection Methods 0.000 description 5
- 210000003484 anatomy Anatomy 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 206010028980 Neoplasm Diseases 0.000 description 3
- 238000006073 displacement reaction Methods 0.000 description 3
- 210000000056 organ Anatomy 0.000 description 3
- 238000000844 transformation Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 230000001537 neural effect Effects 0.000 description 2
- 230000007170 pathology Effects 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 238000007619 statistical method Methods 0.000 description 2
- 238000013519 translation Methods 0.000 description 2
- 208000003174 Brain Neoplasms Diseases 0.000 description 1
- 210000001015 abdomen Anatomy 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000003925 brain function Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 210000004185 liver Anatomy 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 238000011002 quantification Methods 0.000 description 1
- 230000000241 respiratory effect Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 210000003625 skull Anatomy 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 239000013598 vector Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/38—Registration of image sequences
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
- Image Processing (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Image Analysis (AREA)
Description
例えば変動を測定することによる、前記大域的変換の精度と、
不正確性の理由、例えば制約が強すぎる変換と、
前記画像内の問題のある位置、例えば局所的な画像アーチファクトと、
を示す結果として生じる変換の比較を可能にする。
102:画像
104:平面
106:表
200:コンピュータ
202:画像データ収集装置
204:メモリ
206:GUI
208:分割プログラムモジュール
210:プログラムモジュール
212:プログラムモジュール
214:メモリ
216:プログラム
218:ディスプレイ
Claims (11)
- 画像位置合わせの方法において、
少なくとも第1画像データ及び第2画像データを提供するステップと、
前記第1画像データ及び前記第2画像データの部分体積を選択するステップと、
前記部分体積のそれぞれに対して位置合わせを実行し、各位置合わせが変換パラメータセットを提供するステップと、
前記第1画像データ及び前記第2画像データに対して大域的位置合わせを実行し、前記大域的位置合わせが大域的変換パラメータセットを提供するステップと、
前記1つの部分体積に対する変換パラメータセットと前記他の部分体積に対する変換パラメータセット及び前記大域的変換パラメータセットのそれぞれとの間の距離測度を計算し、それぞれの前記距離測度に基づいて前記1つの部分体積に対する変換パラメータセットの平均距離測度を計算するステップと、
前記1つの部分体積に対する変換パラメータセットの前記平均距離測度が、閾値距離値より大きい場合に、前記1つの部分体積に対する変換パラメータセットを、外れ値変換パラメータセットとして識別するステップと、
前記外れ値変換パラメータセットとして識別された変換パラメータセットに対応する外れ値部分体積を示す信号を出力するステップと、
を有する方法。 - 前記第1画像データ及び/又は前記第2画像データが、X線撮像法、磁気共鳴撮像法、コンピュータ断層撮影法、機能的MRI、単一光子放射型コンピュータ断層撮影法又は陽子放射型断層撮影法により提供される、請求項1に記載の方法。
- 前記部分体積の選択が、グラフィカル・ユーザ・インターフェースを用いて手動で実行される、請求項1又は2に記載の方法。
- 前記部分体積の選択が、画像分割ステップを用いて実行される、請求項1、2又は3に記載の方法。
- 前記外れ値部分体積を切り離すステップを有する、請求項1ないし4の何れか一項に記載の方法。
- 前記信号に応答して、前記外れ値部分体積に対して、変形を伴う画像位置合わせを実行するステップを有する、請求項1ないし4の何れか一項に記載の方法。
- 少なくとも第1画像データ及び第2画像データを位置合わせするプログラム手段を有する特定のデジタル記憶媒体内のコンピュータプログラムにおいて、前記プログラム手段が、
前記第1画像データ及び前記第2画像データの部分体積の選択を記憶するステップと、
前記部分体積のそれぞれに対して位置合わせを実行し、各位置合わせが変換パラメータセットを提供するステップと、
前記第1画像データ及び前記第2画像データに対して大域的位置合わせを実行し、前記大域的位置合わせが大域的変換パラメータセットを提供するステップと、
前記1つの部分体積に対する変換パラメータセットと前記他の部分体積に対する変換パラメータセット及び前記大域的変換パラメータセットのそれぞれとの間の距離測度を計算し、それぞれの前記距離測度に基づいて前記1つの部分体積に対する変換パラメータセットの平均距離測度を計算するステップと、
前記1つの部分体積に対する変換パラメータセットの前記平均距離測度が、閾値距離値より大きい場合に、前記1つの部分体積に対する変換パラメータセットを、外れ値変換パラメータセットとして識別するステップと、
前記外れ値変換パラメータセットの部分体積を示す信号を出力するステップと、
を実行するように適合されたコンピュータプログラム。 - 医用画像データ処理装置において、
少なくとも第1画像データ及び第2画像データを記憶するメモリと、
前記第1画像データ及び前記第2画像データの部分体積を選択する手段と、
前記部分体積のそれぞれに対して及び前記第1画像データ及び前記第2画像データに対して位置合わせを実行し、各位置合わせが変換パラメータセットを提供する手段と、
前記1つの部分体積に対する変換パラメータセットと前記他の部分体積に対する変換パラメータセット及び前記大域的変換パラメータセットのそれぞれとの間の距離測度を計算し、それぞれの前記距離測度に基づいて前記1つの部分体積に対する変換パラメータセットの平均距離測度を計算する手段と、
前記1つの部分体積に対する変換パラメータセットの前記平均距離測度が、閾値距離値より大きい場合に、前記1つの部分体積に対する変換パラメータセットを、外れ値変換パラメータセットとして識別する手段と、
前記外れ値変換パラメータセットとして識別された変換パラメータセットに対応する部分体積を示す信号を出力する手段と、
を有する医用画像データ処理装置。 - 前記部分体積を選択するグラフィカル・ユーザ・インターフェースを有する、請求項8に記載の医用画像データ処理装置。
- 前記部分体積を選択する画像分割手段を有する、請求項8又は9に記載の医用画像データ処理装置。
- 外れ値変換パラメータセットが識別される場合に、変形を伴う画像位置合わせを実行する画像位置合わせ手段を有する、請求項8、9又は10に記載の医用画像データ処理装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP03075076 | 2003-01-13 | ||
EP03075076.4 | 2003-01-13 | ||
PCT/IB2003/005898 WO2004063990A1 (en) | 2003-01-13 | 2003-12-04 | A method of image registration and medical image data processing apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006512960A JP2006512960A (ja) | 2006-04-20 |
JP4744883B2 true JP4744883B2 (ja) | 2011-08-10 |
Family
ID=32695599
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004566182A Expired - Fee Related JP4744883B2 (ja) | 2003-01-13 | 2003-12-04 | 画像位置合わせ方法及び医用画像データ処理装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US7778490B2 (ja) |
EP (2) | EP1588328B1 (ja) |
JP (1) | JP4744883B2 (ja) |
AU (1) | AU2003286329A1 (ja) |
WO (1) | WO2004063990A1 (ja) |
Families Citing this family (44)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7970625B2 (en) | 2004-11-04 | 2011-06-28 | Dr Systems, Inc. | Systems and methods for retrieval of medical data |
US7885440B2 (en) | 2004-11-04 | 2011-02-08 | Dr Systems, Inc. | Systems and methods for interleaving series of medical images |
US7660488B2 (en) | 2004-11-04 | 2010-02-09 | Dr Systems, Inc. | Systems and methods for viewing medical images |
US7920152B2 (en) | 2004-11-04 | 2011-04-05 | Dr Systems, Inc. | Systems and methods for viewing medical 3D imaging volumes |
US7787672B2 (en) | 2004-11-04 | 2010-08-31 | Dr Systems, Inc. | Systems and methods for matching, naming, and displaying medical images |
JP2008524739A (ja) * | 2004-12-21 | 2008-07-10 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | データセットのハンドリング |
US7653264B2 (en) | 2005-03-04 | 2010-01-26 | The Regents Of The University Of Michigan | Method of determining alignment of images in high dimensional feature space |
GB0514553D0 (en) | 2005-07-15 | 2005-08-24 | Nonlinear Dynamics Ltd | A method of analysing a representation of a separation pattern |
DE102005058095A1 (de) * | 2005-12-05 | 2007-06-06 | Forschungszentrum Jülich GmbH | Verfahren zur topographischen Darstellung von Veränderungen in einem untersuchten Gehirn |
JP4690204B2 (ja) * | 2006-01-16 | 2011-06-01 | 富士フイルム株式会社 | 画像再生装置およびそのプログラム |
DE102006029718A1 (de) * | 2006-06-28 | 2008-01-10 | Siemens Ag | Verfahren zur Auswertung zweier Abbilder sowie medizinisches Abbildungssystem |
US7953614B1 (en) | 2006-11-22 | 2011-05-31 | Dr Systems, Inc. | Smart placement rules |
US8385687B1 (en) * | 2006-12-06 | 2013-02-26 | Matrox Electronic Systems, Ltd. | Methods for determining a transformation between images |
JP2008161266A (ja) * | 2006-12-27 | 2008-07-17 | Ritsumeikan | 画像処理装置、コンピュータプログラム、及び画像処理方法 |
WO2008103435A1 (en) * | 2007-02-22 | 2008-08-28 | Indiana University Research & Technology Corporation | Imaging resolution recovery techniques |
EP1982652A1 (en) | 2007-04-20 | 2008-10-22 | Medicim NV | Method for deriving shape information |
WO2008141293A2 (en) * | 2007-05-11 | 2008-11-20 | The Board Of Regents Of The University Of Oklahoma One Partner's Place | Image segmentation system and method |
US8229168B2 (en) * | 2008-02-20 | 2012-07-24 | International Business Machines Corporation | Fast license plate verifier |
EP2283458B1 (en) * | 2008-03-21 | 2015-05-20 | Alltec Angewandte Laserlicht Technologie GmbH | Multi model registration (mmr) for a galvanometer and laser system |
US8068652B2 (en) * | 2008-08-29 | 2011-11-29 | General Electric Company | Semi-automated registration of data based on a hierarchical mesh |
DE102008049467B4 (de) * | 2008-09-29 | 2016-12-29 | Siemens Healthcare Gmbh | Verfahren und Vorrichtung zur Registrierung von tomographischen Volumendatensätzen des Darms |
JP5523791B2 (ja) * | 2008-10-27 | 2014-06-18 | 株式会社東芝 | X線診断装置および画像処理装置 |
US8380533B2 (en) | 2008-11-19 | 2013-02-19 | DR Systems Inc. | System and method of providing dynamic and customizable medical examination forms |
US8712120B1 (en) | 2009-09-28 | 2014-04-29 | Dr Systems, Inc. | Rules-based approach to transferring and/or viewing medical images |
EP2591459B1 (en) * | 2010-07-09 | 2016-09-07 | Koninklijke Philips N.V. | Automatic point-wise validation of respiratory motion estimation |
US9075899B1 (en) | 2011-08-11 | 2015-07-07 | D.R. Systems, Inc. | Automated display settings for categories of items |
US8675944B2 (en) * | 2012-01-12 | 2014-03-18 | Kabushiki Kaisha Toshiba | Method of registering image data |
CN102663361B (zh) * | 2012-04-01 | 2014-01-01 | 北京工业大学 | 一种面向整体特征分析的人脸图像可逆几何归一化方法 |
US9495604B1 (en) | 2013-01-09 | 2016-11-15 | D.R. Systems, Inc. | Intelligent management of computerized advanced processing |
US9552533B2 (en) * | 2013-03-05 | 2017-01-24 | Toshiba Medical Systems Corporation | Image registration apparatus and method |
CN103325111A (zh) * | 2013-06-05 | 2013-09-25 | 哈尔滨工程大学 | 一种基于互信息的非刚性声纳图像配准方法 |
EP2932470A2 (en) | 2013-10-18 | 2015-10-21 | Koninklijke Philips N.V. | Registration of medical images |
US9727965B2 (en) | 2014-11-25 | 2017-08-08 | Toshiba Medical Systems Corporation | Medical image processing apparatus and medical image processing method |
US10929508B2 (en) | 2015-04-30 | 2021-02-23 | Merge Healthcare Solutions Inc. | Database systems and interactive user interfaces for dynamic interaction with, and indications of, digital medical image data |
JP6768389B2 (ja) * | 2015-08-07 | 2020-10-14 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
WO2017071956A1 (en) * | 2015-10-28 | 2017-05-04 | Koninklijke Philips N.V. | Computed tomography image generation apparatus |
US10424045B2 (en) * | 2017-06-21 | 2019-09-24 | International Business Machines Corporation | Machine learning model for automatic image registration quality assessment and correction |
EP3684463A4 (en) | 2017-09-19 | 2021-06-23 | Neuroenhancement Lab, LLC | NEURO-ACTIVATION PROCESS AND APPARATUS |
US11717686B2 (en) | 2017-12-04 | 2023-08-08 | Neuroenhancement Lab, LLC | Method and apparatus for neuroenhancement to facilitate learning and performance |
US11478603B2 (en) | 2017-12-31 | 2022-10-25 | Neuroenhancement Lab, LLC | Method and apparatus for neuroenhancement to enhance emotional response |
US11364361B2 (en) | 2018-04-20 | 2022-06-21 | Neuroenhancement Lab, LLC | System and method for inducing sleep by transplanting mental states |
WO2020056418A1 (en) | 2018-09-14 | 2020-03-19 | Neuroenhancement Lab, LLC | System and method of improving sleep |
CN111435969B (zh) * | 2019-01-11 | 2021-11-09 | 佳能株式会社 | 图像处理装置及其控制方法、记录介质和信息处理系统 |
US11151703B2 (en) | 2019-09-12 | 2021-10-19 | International Business Machines Corporation | Artifact removal in medical imaging |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5575286A (en) * | 1995-03-31 | 1996-11-19 | Siemens Medical Systems, Inc. | Method and apparatus for generating large compound ultrasound image |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS59137942A (ja) * | 1983-01-28 | 1984-08-08 | Hitachi Ltd | 画像位置合わせ方式 |
DE69736549T2 (de) * | 1996-02-29 | 2007-08-23 | Acuson Corp., Mountain View | System, verfahren und wandler zum ausrichten mehrerer ultraschallbilder |
US5876342A (en) * | 1997-06-30 | 1999-03-02 | Siemens Medical Systems, Inc. | System and method for 3-D ultrasound imaging and motion estimation |
US6078701A (en) * | 1997-08-01 | 2000-06-20 | Sarnoff Corporation | Method and apparatus for performing local to global multiframe alignment to construct mosaic images |
US6393971B1 (en) | 1998-10-09 | 2002-05-28 | Star Manufacturing International, Inc. | Roller grill assembly for cooking human food |
US6611615B1 (en) | 1999-06-25 | 2003-08-26 | University Of Iowa Research Foundation | Method and apparatus for generating consistent image registration |
US6266453B1 (en) * | 1999-07-26 | 2001-07-24 | Computerized Medical Systems, Inc. | Automated image fusion/alignment system and method |
IL133562A0 (en) | 1999-12-16 | 2001-04-30 | Compugen Ltd | Method for registering separation patterns |
JP2002149821A (ja) | 2000-09-04 | 2002-05-24 | Ge Medical Systems Global Technology Co Llc | 医用画像提供方法、医用ソフトウェア提供方法、医用画像集中管理サーバー装置、医用ソフトウェア集中管理サーバー装置、医用画像提供システムおよび医用ソフトウェア提供システム |
US6909794B2 (en) * | 2000-11-22 | 2005-06-21 | R2 Technology, Inc. | Automated registration of 3-D medical scans of similar anatomical structures |
-
2003
- 2003-12-04 AU AU2003286329A patent/AU2003286329A1/en not_active Abandoned
- 2003-12-04 WO PCT/IB2003/005898 patent/WO2004063990A1/en active Application Filing
- 2003-12-04 JP JP2004566182A patent/JP4744883B2/ja not_active Expired - Fee Related
- 2003-12-04 US US10/541,406 patent/US7778490B2/en active Active
- 2003-12-04 EP EP03777072.4A patent/EP1588328B1/en not_active Expired - Lifetime
- 2003-12-04 EP EP17171917.2A patent/EP3239930B1/en not_active Expired - Lifetime
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5575286A (en) * | 1995-03-31 | 1996-11-19 | Siemens Medical Systems, Inc. | Method and apparatus for generating large compound ultrasound image |
Also Published As
Publication number | Publication date |
---|---|
EP3239930B1 (en) | 2019-04-17 |
US20060188134A1 (en) | 2006-08-24 |
JP2006512960A (ja) | 2006-04-20 |
EP3239930A1 (en) | 2017-11-01 |
EP1588328A1 (en) | 2005-10-26 |
AU2003286329A1 (en) | 2004-08-10 |
US7778490B2 (en) | 2010-08-17 |
EP1588328B1 (en) | 2017-08-16 |
WO2004063990A1 (en) | 2004-07-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4744883B2 (ja) | 画像位置合わせ方法及び医用画像データ処理装置 | |
US7995864B2 (en) | Method and system for performing image registration | |
EP2422318B1 (en) | Quantification of medical image data | |
US8045771B2 (en) | System and method for automated patient anatomy localization | |
Hartkens et al. | Using points and surfaces to improve voxel-based non-rigid registration | |
JP6316671B2 (ja) | 医療画像処理装置および医用画像処理プログラム | |
US20100123715A1 (en) | Method and system for navigating volumetric images | |
US20060030769A1 (en) | System and method for loading timepoints for analysis of disease progression or response to therapy | |
EP3722996A2 (en) | Systems and methods for processing 3d anatomical volumes based on localization of 2d slices thereof | |
CN106295110B (zh) | 医学图像处理方法和图像处理系统 | |
US10803986B2 (en) | Automatic layout apparatus, automatic layout method, and automatic layout program | |
JP7080304B2 (ja) | 学習支援装置、学習支援方法、学習支援プログラム、関心領域判別装置、関心領域判別方法、関心領域判別プログラム及び学習済みモデル | |
US8306354B2 (en) | Image processing apparatus, method, and program | |
JP5363962B2 (ja) | 診断支援システム、診断支援プログラムおよび診断支援方法 | |
US10249050B2 (en) | Image processing apparatus and image processing method | |
JP2005270635A (ja) | 画像処理方法及び処理装置 | |
JP6525903B2 (ja) | 画像表示装置、方法およびプログラム | |
US10929990B2 (en) | Registration apparatus, method, and program | |
JP6869086B2 (ja) | 位置合せ装置および位置合せ方法並びに位置合せプログラム | |
JP6738003B1 (ja) | Mri画像に基づく解剖学的部位の抽出装置,方法,プログラム | |
Wang et al. | ITK4/ANTS |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20061201 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090714 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20091009 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20091019 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100112 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100615 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100907 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100930 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20101224 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20110106 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110324 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110414 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110511 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140520 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |