JP2017523826A - 患者の肺の複数のctスキャンのための統合された座標システム - Google Patents
患者の肺の複数のctスキャンのための統合された座標システム Download PDFInfo
- Publication number
- JP2017523826A JP2017523826A JP2016575497A JP2016575497A JP2017523826A JP 2017523826 A JP2017523826 A JP 2017523826A JP 2016575497 A JP2016575497 A JP 2016575497A JP 2016575497 A JP2016575497 A JP 2016575497A JP 2017523826 A JP2017523826 A JP 2017523826A
- Authority
- JP
- Japan
- Prior art keywords
- images
- model
- coordinate
- image
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/003—Reconstruction from projections, e.g. tomography
- G06T11/008—Specific post-processing after tomographic reconstruction, e.g. voxelisation, metal artifact correction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/38—Registration of image sequences
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10081—Computed x-ray tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30061—Lung
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/41—Medical
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Architecture (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Geometry (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
Abstract
Description
この出願は、2014年7月2日に出願された米国仮特許出願第62/020,242号の利益および優先権を主張し、その全体の内容が参照により本明細書に援用される。
本開示は、統合された座標システムにおいて、コンピュータ断層撮影(CT)画像を処理して、CT画像の複数の組を整列させるシステムおよび方法に関する。
患者の肺の可視化に関係する可視化技術は、臨床医が患者の肺において診断および/または手術を行うことを助けるように開発されてきた。可視化は、患部の場所を識別するために、特に重要である。さらに、患部を処置するとき、外科手術が正しい位置で行われるように、さらなる強調が患部の特定の位置の識別に対して付与される。
本開示に従ったCT画像を整列させるシステムは、複数のCT画像の組を処理する中央処理ユニット(CPU)を含む。CPUは、CT画像の組における複数のCT画像から主気管分岐部の場所を決定し、主気管分岐部を原点と設定し、複数のCT画像の間の各CT画像における各ピクセルに対するx−座標、y−座標およびz−座標を原点に基づいて計算し、複数のCT画像から3Dモデルを表示し、各ピクセルに対するx−座標、y−座標およびz−座標を3Dモデルにおける各対応するボクセルと関連付け、そして、3Dモデルにおけるそれぞれ対応するボクセルに対するx−座標、y−座標およびz−座標をボクセル位置データとして格納することによって、各CT画像の組を処理する。システムは、また、ボクセル位置データおよび、第一の3Dモデルおよび第二の3Dモデルを表示するディスプレイに基づいて、複数のCT画像の組における各CT画像に組に対する3Dモデルを処理するグラフィック処理ユニット(GPU)も含む。
本開示は、統合された座標システムにおける、複数の組のCT画像を整列させるデバイス、システム、および方法に関する。複数の組のCT画像の整列は、電磁ナビゲーション(EMN)システムを用い、そして腫瘍または病変の進行および/または退行を監視するELECTROMAGNETIC NAVIGATION BRONCHOSCOPY(登録商標)(EMB)手順を行うことを計画する経路の必要な構成要素であり得る。
次の入力を仮定する:
n=CTスキャンスライス番号
s=mmにおけるCTスキャンスライス間隔(つまり、スライスの間のz距離)
x=特定のCTスライス上の点のmmにおけるX座標
y=特定のCTスライス上の点のmmにおけるY座標
nc、xc、yc=原点116に対する座標;および
np、xp、yp=CTスキャンにおけるピクセルの座標、であり、
CPU104は、統合された座標システムにおける各ボクセルに対して、mmにおける座標(Xup、Yup、Zup)を次のように割り当てる。
Xup=xp−xc;
Yup=Yp−Yc;および
Zup=np*s−nc*s
Claims (11)
- CT整列システムであって、該CT整列システムは、
複数のCT画像の組を処理する中央処理装置(CPU)であって、該CPUは、
該CT画像の組における複数のCT画像から主気管分岐部の場所を決定することと;
該主気管分岐部を原点として設定することと;
該複数のCT画像の中の各CT画像における各ピクセルに対する、x−座標、y−座標およびz−座標を該原点に基づいて計算することと;
該複数のCT画像から3Dモデルを得ることと;
各CT画像における各ピクセルに対する、x−座標、y−座標およびz−座標を、3Dモデルにおける対応するボクセルと関連付けることと;
ボクセル位置データとしての各対応する3Dモデルにおけるボクセルに対するx−座標、y−座標およびz−座標を格納することと、
を含むステップを実施することによって各CT画像の組を処理する中央処理装置(CPU)と;
該複数のCT画像の組における該CT画像の組のそれぞれに対する該3Dモデルを、該ボクセル位置データに基づいて処理するグラフィック処理ユニット(GPU)と;
第一の処理されたCT画像の組に対する第一の3Dモデルおよび第二の処理されたCT画像の組に対する第二の3Dモデルを表示するディスプレイと
を含む、CT整列システム。 - 前記CPUは、
前記複数のCT画像の中の第一のCT画像を決定することであって、こここで、該第一のCT画像は、前記主気管分岐部を含む、ことと;
前記第一のCT画像における各ピクセルに対するz−座標をゼロに設定することと;
該第一のCT画像における各ピクセルに対する前記x−座標を、前記原点に基づいて決定することと;
前記y−座標を、原点に基づいて決定することと;
該第一のCT画像における各ピクセルに対する該z−座標、前記決定されたx−座標および前記決定されたy−座標を、第一のピクセル位置データとして格納することと、
を含むステップを実施する、
請求項1に記載のCT整列システム。 - 前記CPUは、
前記複数のCT画像の中の第二のCT画像を処理することと;
前記第一のCT画像と該第二のCT画像との間の距離に基づいて、該第二のCT画像において各ピクセルに対するz−座標を決定することと;
該第二のCT画像における基準点を設定することであって、該基準点はz−軸に沿って軸方向に原点と整列させられている、ことと;
該第二のCT画像における各ピクセルに対するx−座標を、該基準点に基づいて決定することと;
該第二のCT画像における各ピクセルに対するy−座標を、該基準点に基づいて決定することと;
該第二のCT画像における各ピクセルに対する該決定されたz−座標、該決定されたx−座標、および該決定されたy−座標を第二のピクセル位置データとして格納することと、
を含むステップを実施する、請求項2に記載のCT整列システム。 - 前記複数のCT画像は、データ格納部から得られる、請求項1に記載のCT整列システム。
- 前記ディスプレイは、前記第一の3Dモデルおよび第二の処理された3Dモデルを並べて表示する、請求項2に記載のCT整列システム。
- 前記第一の3Dモデルおよび前記第二の3Dモデルは、同期されており、それによって、ユーザが該第一の3Dモデルおよび該第二の3Dモデルを同時に操作できる、請求項1に記載のCT整列システム。
- CT整列システムであって、該CT整列システムは、
複数のCT画像の組を処理する中央処理ユニット(CPU)であって、該CPUは、
主気管分岐部、気管分岐部の右葉および、気管分岐部の左葉をCT画像の組における複数のCT画像から決定することと;
該主気管分岐部、該気管分岐部の右葉および該気管分岐部の左葉の場所に基づいて基準面を設定することと;
主気管分岐部を原点であると設定することと;
該複数のCT画像の中の各CT画像における各ピクセルに対する、x−座標、y−座標およびz−座標を該原点および該基準面に基づいて計算することと;
該複数のCT画像から3Dモデルを得ることと;
各CT画像における各ピクセルに対する、該x−座標、該y−座標および該z−座標を対応する、3Dモデルにおけるボクセルと関連付けることと;
ボクセル位置データとしての各対応する3Dモデルにおけるピクセルに対する該x−座標、該y−座標および該z−座標を格納することと、
を含むステップを実施することによって各CT画像の組を処理する中央処理装置(CPU)と;
該複数のCT画像の組における該CT画像の組のそれぞれに対する該3Dモデルを、該ボクセル位置データに基づいて処理するグラフィック処理ユニット(GPU)と;
第一の3Dモデルおよび第二の3Dモデルを表示するディスプレイと、
を含む、
CT整列システム。 - 前記CPUは、
前記複数のCT画像の中のCT画像を処理することと;
前記原点からの距離に基づいて、該CT画像において各ピクセルに対するz−座標を決定することと;
該CT画像における基準点を設定することであって、該基準点は基準面と同一平面にあり、該基準点はz−軸に沿って軸方向に原点と整列させられることと;
該第二のCT画像における各ピクセルに対する前記x−座標を、基準点に基づいて決定することと;
該第二のCT画像における各ピクセルに対する前記y−座標を、基準点に基づいて決定することと;
該CT画像における各ピクセルに対する該決定されたz−座標、該決定されたx−座標および該決定されたy−座標を、ピクセル位置データとして格納することと、
を含むステップを実施する、
請求項5に記載のCT整列システム。 - 前記複数のCT画像は、データ格納部から得られる、請求項5に記載のCT整列システム。
- 前記ディスプレイは、前記第一の3Dモデルおよび前記第二の3Dモデル並べて表示する、請求項7に記載のCT整列システム。
- 前記第一の3Dモデルおよび前記第二の3Dモデルは同期させられており、それによって、ユーザが該第一の3Dモデルおよび該第二の3Dモデルを同時に操作することを可能にする、請求項5に記載のCT整列システム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201462020242P | 2014-07-02 | 2014-07-02 | |
US62/020,242 | 2014-07-02 | ||
PCT/US2015/038737 WO2016004154A1 (en) | 2014-07-02 | 2015-07-01 | Unified coordinate system for multiple ct scans of patient lungs |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017523826A true JP2017523826A (ja) | 2017-08-24 |
JP6514724B2 JP6514724B2 (ja) | 2019-05-15 |
Family
ID=55017350
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016575497A Expired - Fee Related JP6514724B2 (ja) | 2014-07-02 | 2015-07-01 | 患者の肺の複数のctスキャンのための統合された座標システム |
Country Status (7)
Country | Link |
---|---|
US (3) | US9727986B2 (ja) |
EP (1) | EP3164075B1 (ja) |
JP (1) | JP6514724B2 (ja) |
CN (1) | CN106659455B (ja) |
AU (1) | AU2015284153B2 (ja) |
CA (1) | CA2953691A1 (ja) |
WO (1) | WO2016004154A1 (ja) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9603668B2 (en) | 2014-07-02 | 2017-03-28 | Covidien Lp | Dynamic 3D lung map view for tool navigation inside the lung |
US9633431B2 (en) | 2014-07-02 | 2017-04-25 | Covidien Lp | Fluoroscopic pose estimation |
US9754367B2 (en) * | 2014-07-02 | 2017-09-05 | Covidien Lp | Trachea marking |
CN106572834B (zh) | 2014-07-02 | 2019-12-03 | 柯惠有限合伙公司 | 对准ct |
CN106659455B (zh) | 2014-07-02 | 2020-06-05 | 柯惠有限合伙公司 | 用于患者肺部的多张ct扫描片的统一坐标系 |
US11188285B2 (en) | 2014-07-02 | 2021-11-30 | Covidien Lp | Intelligent display |
US20170178266A1 (en) * | 2015-12-16 | 2017-06-22 | Sap Se | Interactive data visualisation of volume datasets with integrated annotation and collaboration functionality |
US10582914B2 (en) | 2016-01-15 | 2020-03-10 | Covidien Lp | Navigable endobronchial tool to access tissue outside a bronchus |
US10939963B2 (en) | 2016-09-01 | 2021-03-09 | Covidien Lp | Systems and methods for providing proximity awareness to pleural boundaries, vascular structures, and other critical intra-thoracic structures during electromagnetic navigation bronchoscopy |
US10543044B2 (en) | 2016-09-27 | 2020-01-28 | Covidien Lp | Systems and methods for detecting pleural invasion for surgical and interventional planning |
US10542953B2 (en) | 2016-09-27 | 2020-01-28 | Covidien Lp | Fissural assessment and surgical and interventional planning |
US11464576B2 (en) | 2018-02-09 | 2022-10-11 | Covidien Lp | System and method for displaying an alignment CT |
CN108742838B (zh) * | 2018-03-29 | 2020-06-16 | 四川大学华西医院 | 一种段间标志点量化的肺段模型的制备方法 |
WO2020068788A1 (en) * | 2018-09-24 | 2020-04-02 | K2M, Inc. | System and method for isolating anatomical features in computerized tomography data |
CN116895368B (zh) * | 2023-09-11 | 2024-03-29 | 苏州云图健康科技有限公司 | 一种用于医学影像的三维定位辅助显示方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005124895A (ja) * | 2003-10-24 | 2005-05-19 | Hitachi Medical Corp | 画像診断支援装置 |
JP2009112531A (ja) * | 2007-11-06 | 2009-05-28 | Toshiba Corp | 画像表示装置 |
Family Cites Families (33)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5542915A (en) | 1992-08-12 | 1996-08-06 | Vidamed, Inc. | Thermal mapping catheter with ultrasound probe |
US6122341A (en) * | 1992-06-12 | 2000-09-19 | Butler; William E. | System for determining target positions in the body observed in CT image data |
US5364392A (en) | 1993-05-14 | 1994-11-15 | Fidus Medical Technology Corporation | Microwave ablation catheter system with impedance matching tuner and method |
US6575969B1 (en) | 1995-05-04 | 2003-06-10 | Sherwood Services Ag | Cool-tip radiofrequency thermosurgery electrode system for tumor ablation |
US6689127B1 (en) | 1995-08-15 | 2004-02-10 | Rita Medical Systems | Multiple antenna ablation apparatus and method with multiple sensor feedback |
SE519310C2 (sv) | 1997-10-02 | 2003-02-11 | Prostalund Operations Ab | Anordning för värmetillförsel |
US6427089B1 (en) | 1999-02-19 | 2002-07-30 | Edward W. Knowlton | Stomach treatment apparatus and method |
US7097641B1 (en) | 1999-12-09 | 2006-08-29 | Cryocath Technologies Inc. | Catheter with cryogenic and heating ablation |
US7206462B1 (en) | 2000-03-17 | 2007-04-17 | The General Hospital Corporation | Method and system for the detection, comparison and volumetric quantification of pulmonary nodules on medical computed tomography scans |
US6942661B2 (en) | 2000-08-30 | 2005-09-13 | Boston Scientific Scimed, Inc. | Fluid cooled apparatus for supporting diagnostic and therapeutic elements in contact with tissue |
JP5361103B2 (ja) * | 2000-10-24 | 2013-12-04 | 株式会社東芝 | 画像処理装置 |
ITPI20010006A1 (it) | 2001-01-31 | 2002-07-31 | Cnr Consiglio Naz Delle Ricer | Antenna interstiziale con choke miniaturizzato per applicazioni di ipertemia a microonde in medicina e chirurgia |
US7998062B2 (en) * | 2004-03-29 | 2011-08-16 | Superdimension, Ltd. | Endoscope structures and techniques for navigating to a target in branched structure |
US7123008B1 (en) * | 2002-04-19 | 2006-10-17 | Fonar Corporation | Positional magnetic resonance imaging |
US7379769B2 (en) | 2003-09-30 | 2008-05-27 | Sunnybrook Health Sciences Center | Hybrid imaging method to monitor medical device delivery and patient support for use in the method |
EP1691666B1 (en) * | 2003-12-12 | 2012-05-30 | University of Washington | Catheterscope 3d guidance and interface system |
US20050245920A1 (en) | 2004-04-30 | 2005-11-03 | Vitullo Jeffrey M | Cell necrosis apparatus with cooled microwave antenna |
JP4335817B2 (ja) * | 2005-01-07 | 2009-09-30 | ザイオソフト株式会社 | 関心領域指定方法、関心領域指定プログラム、関心領域指定装置 |
US20070127791A1 (en) * | 2005-11-15 | 2007-06-07 | Sectra Ab | Automated synchronization of 3-D medical images, related methods and computer products |
US7630531B2 (en) | 2006-01-31 | 2009-12-08 | Mevis Medical Solutions, Inc. | Enhanced navigational tools for comparing medical images |
EP3797721A1 (en) | 2006-03-24 | 2021-03-31 | Neuwave Medical, Inc. | Transmission line with heat transfer ability |
JP5865702B2 (ja) | 2008-04-03 | 2016-02-17 | メドトロニック,インク.Medtronic,Inc. | 温熱治療のためのシステムおよび方法 |
CN102365655A (zh) * | 2009-06-10 | 2012-02-29 | 三菱电机株式会社 | 图像核对装置以及使用了该图像核对装置的患者定位装置 |
US8551083B2 (en) | 2009-11-17 | 2013-10-08 | Bsd Medical Corporation | Microwave coagulation applicator and system |
US9993294B2 (en) | 2009-11-17 | 2018-06-12 | Perseon Corporation | Microwave coagulation applicator and system with fluid injection |
CN108714022A (zh) | 2010-11-27 | 2018-10-30 | Securus医药集团股份有限公司 | 消融和温度测量设备 |
US20120232549A1 (en) | 2011-03-09 | 2012-09-13 | Vivant Medical, Inc. | Systems for thermal-feedback-controlled rate of fluid flow to fluid-cooled antenna assembly and methods of directing energy to tissue using same |
CN103841913B (zh) | 2011-04-08 | 2016-02-24 | 柯惠有限合伙公司 | 用于天然或人造管腔的柔性微波导管 |
US9020229B2 (en) | 2011-05-13 | 2015-04-28 | Broncus Medical, Inc. | Surgical assistance planning method using lung motion analysis |
US9292917B2 (en) * | 2011-11-23 | 2016-03-22 | Siemens Aktiengesellschaft | Method and system for model-based fusion of computed tomography and non-contrasted C-arm computed tomography |
US9044254B2 (en) | 2012-08-07 | 2015-06-02 | Covidien Lp | Microwave ablation catheter and method of utilizing the same |
CN105377177B (zh) * | 2013-03-14 | 2018-08-07 | Vida诊断公司 | 肺减容手术的治疗设计 |
CN106659455B (zh) | 2014-07-02 | 2020-06-05 | 柯惠有限合伙公司 | 用于患者肺部的多张ct扫描片的统一坐标系 |
-
2015
- 2015-07-01 CN CN201580040193.6A patent/CN106659455B/zh active Active
- 2015-07-01 WO PCT/US2015/038737 patent/WO2016004154A1/en active Application Filing
- 2015-07-01 JP JP2016575497A patent/JP6514724B2/ja not_active Expired - Fee Related
- 2015-07-01 AU AU2015284153A patent/AU2015284153B2/en not_active Ceased
- 2015-07-01 EP EP15815166.2A patent/EP3164075B1/en active Active
- 2015-07-01 CA CA2953691A patent/CA2953691A1/en not_active Abandoned
- 2015-07-01 US US14/788,952 patent/US9727986B2/en active Active
-
2017
- 2017-08-01 US US15/665,514 patent/US10049471B2/en active Active
-
2018
- 2018-08-03 US US16/054,190 patent/US10282873B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005124895A (ja) * | 2003-10-24 | 2005-05-19 | Hitachi Medical Corp | 画像診断支援装置 |
JP2009112531A (ja) * | 2007-11-06 | 2009-05-28 | Toshiba Corp | 画像表示装置 |
Also Published As
Publication number | Publication date |
---|---|
EP3164075B1 (en) | 2021-03-24 |
CA2953691A1 (en) | 2016-01-07 |
CN106659455A (zh) | 2017-05-10 |
US9727986B2 (en) | 2017-08-08 |
AU2015284153B2 (en) | 2019-07-18 |
US10282873B2 (en) | 2019-05-07 |
US20160005224A1 (en) | 2016-01-07 |
EP3164075A4 (en) | 2018-01-24 |
AU2015284153A1 (en) | 2017-01-12 |
WO2016004154A1 (en) | 2016-01-07 |
US20170330356A1 (en) | 2017-11-16 |
EP3164075A1 (en) | 2017-05-10 |
US20180342089A1 (en) | 2018-11-29 |
US10049471B2 (en) | 2018-08-14 |
CN106659455B (zh) | 2020-06-05 |
JP6514724B2 (ja) | 2019-05-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10282873B2 (en) | Unified coordinate system for multiple CT scans of patient lungs | |
Wang et al. | Video see‐through augmented reality for oral and maxillofacial surgery | |
US11361439B2 (en) | System and method for detecting trachea | |
US10460441B2 (en) | Trachea marking | |
CN105232152B (zh) | 荧光镜位姿估计 | |
Murphy et al. | Evaluation of registration methods on thoracic CT: the EMPIRE10 challenge | |
EP2189942A2 (en) | Method and system for registering a medical image | |
US20130293578A1 (en) | Four Dimensional Image Registration Using Dynamical Model For Augmented Reality In Medical Applications | |
RU2711140C2 (ru) | Редактирование медицинских изображений | |
CN103548054B (zh) | 界标的自动投影以产生图像配准中的额外对应 | |
Hachaj et al. | Visualization of perfusion abnormalities with GPU-based volume rendering | |
US11423554B2 (en) | Registering a two-dimensional image with a three-dimensional image | |
Karner et al. | Single-shot deep volumetric regression for mobile medical augmented reality | |
WO2022054541A1 (ja) | 画像処理装置、方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180508 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180918 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180921 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181116 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190408 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190412 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6514724 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |