JP6434635B2 - マッピング画像表示制御装置および方法並びにプログラム - Google Patents
マッピング画像表示制御装置および方法並びにプログラム Download PDFInfo
- Publication number
- JP6434635B2 JP6434635B2 JP2017538907A JP2017538907A JP6434635B2 JP 6434635 B2 JP6434635 B2 JP 6434635B2 JP 2017538907 A JP2017538907 A JP 2017538907A JP 2017538907 A JP2017538907 A JP 2017538907A JP 6434635 B2 JP6434635 B2 JP 6434635B2
- Authority
- JP
- Japan
- Prior art keywords
- region
- position information
- arrival position
- boundary
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000013507 mapping Methods 0.000 title claims description 74
- 238000000034 method Methods 0.000 title claims description 42
- 210000004072 lung Anatomy 0.000 claims description 82
- 210000000056 organ Anatomy 0.000 claims description 59
- 238000002679 ablation Methods 0.000 claims description 56
- 238000000605 extraction Methods 0.000 claims description 33
- 238000002271 resection Methods 0.000 claims description 15
- 239000000284 extract Substances 0.000 claims description 14
- 230000003902 lesion Effects 0.000 claims description 11
- 210000000621 bronchi Anatomy 0.000 description 23
- 210000001147 pulmonary artery Anatomy 0.000 description 21
- 210000003492 pulmonary vein Anatomy 0.000 description 18
- 206010028980 Neoplasm Diseases 0.000 description 17
- 238000009877 rendering Methods 0.000 description 12
- 210000004204 blood vessel Anatomy 0.000 description 10
- 238000003745 diagnosis Methods 0.000 description 10
- 230000005484 gravity Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 238000010186 staining Methods 0.000 description 7
- 238000004088 simulation Methods 0.000 description 6
- 210000004185 liver Anatomy 0.000 description 5
- 210000000038 chest Anatomy 0.000 description 4
- 238000011144 upstream manufacturing Methods 0.000 description 4
- 230000004397 blinking Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000002591 computed tomography Methods 0.000 description 2
- 230000001788 irregular Effects 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 210000003437 trachea Anatomy 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 210000001015 abdomen Anatomy 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000002526 effect on cardiovascular system Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000005507 spraying Methods 0.000 description 1
- 238000012916 structural analysis Methods 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
- 210000000115 thoracic cavity Anatomy 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/149—Segmentation; Edge detection involving deformable models, e.g. active contour models
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
- A61B2034/101—Computer-aided simulation of surgical operations
- A61B2034/102—Modelling of surgical devices, implants or prosthesis
- A61B2034/104—Modelling the effect of the tool, e.g. the effect of an implanted prosthesis or for predicting the effect of ablation or burring
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2065—Tracking using image or pattern recognition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
- A61B6/032—Transmission computed tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30061—Lung
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/20—Indexing scheme for editing of 3D models
- G06T2219/2004—Aligning objects, relative positioning of parts
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- Physics & Mathematics (AREA)
- Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Radiology & Medical Imaging (AREA)
- Pathology (AREA)
- Biophysics (AREA)
- Optics & Photonics (AREA)
- High Energy & Nuclear Physics (AREA)
- Robotics (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Quality & Reliability (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Architecture (AREA)
- Geometry (AREA)
- Epidemiology (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Primary Health Care (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
Description
2 医用画像保管サーバ
3 表示装置
4 入力装置
10 医用画像取得部
11 臓器領域抽出部
12 管状構造物抽出部
13 到達位置情報推定部
14 切除領域情報取得部
15 境界特定到達位置情報決定部
16 表示制御部
17 分岐位置情報取得部
18 血管領域抽出部
Claims (12)
- 3次元画像に含まれる臓器領域を抽出する臓器領域抽出部と、
前記臓器領域内に含まれる管状構造物を抽出する管状構造物抽出部と、
前記管状構造物に含まれる分枝の延長線が前記臓器領域の表面に到達する到達位置情報を推定する到達位置情報推定部と、
前記臓器領域における切除領域の情報を取得する切除領域情報取得部と、
前記切除領域の情報に基づいて、前記到達位置情報の中から前記切除領域の境界を特定するために用いられる境界特定用の到達位置情報を決定する境界特定到達位置情報決定部と、
前記境界特定用の到達位置情報を前記臓器領域の表面にマッピングしたマッピング画像を生成して表示部に表示させる表示制御部とを備えたことを特徴とするマッピング画像表示制御装置。 - 前記境界特定到達位置情報決定部が、前記臓器領域の表面上における前記切除領域の境界から予め設定された範囲内に存在する前記到達位置情報を前記境界特定用の到達位置情報として決定する請求項1記載のマッピング画像表示制御装置。
- 前記境界特定到達位置情報決定部が、前記臓器領域の表面上における前記切除領域の境界からの距離が近い順で予め設定された個数の前記到達位置情報を前記境界特定用の到達位置情報として決定する請求項1記載のマッピング画像表示制御装置。
- 前記境界特定到達位置情報決定部が、前記切除領域の内側に存在する前記到達位置情報を前記境界特定用の到達位置情報として決定する請求項3記載のマッピング画像表示制御装置。
- 前記境界特定到達位置情報決定部が、前記臓器領域の表面上における前記切除領域内に存在する前記到達位置情報のうち、3個以上の前記到達位置情報を結んで形成される多角形の面積が最大となる前記3個以上の到達位置情報を前記境界特定用の到達位置情報として決定する請求項1記載のマッピング画像表示制御装置。
- 前記切除領域情報取得部が、前記臓器領域内に含まれる病変領域を抽出し、該病変領域に基づいて、前記切除領域の情報を取得する請求項1から5いずれか1項記載のマッピング画像表示制御装置。
- 前記切除領域情報取得部が、前記管状構造物に含まれる分枝の支配領域を決定し、該支配領域に基づいて、前記切除領域の情報を取得する請求項1から5いずれか1項記載のマッピング画像表示制御装置。
- 前記表示制御部が、前記境界特定用の到達位置情報によって特定される到達位置を含む領域を設定し、該領域を前記肺領域の表面にマッピングしたマッピング画像を生成して表示部に表示させる請求項1から7いずれか1項記載のマッピング画像表示制御装置。
- 前記臓器領域が肺領域であり、前記管状構造物が気管支領域である請求項1から8いずれか1項記載のマッピング画像表示制御装置。
- 前記管状構造物の分岐位置の情報を取得する分岐位置情報取得部を備え、
前記到達位置情報推定部が、前記分岐位置の情報に基づいて、前記到達位置情報を推定する請求項1から9いずれか1項記載のマッピング画像表示制御装置。 - 3次元画像に含まれる臓器領域を抽出し、
前記臓器領域内に含まれる管状構造物を抽出し、
前記管状構造物に含まれる分枝の延長線が前記臓器領域の表面に到達する到達位置情報を推定し、
前記臓器領域における切除領域の情報を取得し、
前記切除領域の情報に基づいて、前記到達位置情報の中から前記切除領域の境界を特定するために用いられる境界特定用の到達位置情報を決定し、
前記境界特定用の到達位置情報を前記臓器領域の表面にマッピングしたマッピング画像を生成して表示部に表示させることを特徴とするマッピング画像表示制御方法。 - コンピュータを、3次元画像に含まれる臓器領域を抽出する臓器領域抽出部と、
前記臓器領域内に含まれる管状構造物を抽出する管状構造物抽出部と、
前記管状構造物に含まれる分枝の延長線が前記臓器領域の表面に到達する到達位置情報を推定する到達位置情報推定部と、
前記臓器領域における切除領域の情報を取得する切除領域情報取得部と、
前記切除領域の情報に基づいて、前記到達位置情報の中から前記切除領域の境界を特定するために用いられる境界特定用の到達位置情報を決定する境界特定到達位置情報決定部と、
前記境界特定用の到達位置情報を前記臓器領域の表面にマッピングしたマッピング画像を生成して表示部に表示させる表示制御部として機能させることを特徴とするマッピング画像表示制御プログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015177524 | 2015-09-09 | ||
JP2015177524 | 2015-09-09 | ||
PCT/JP2016/071554 WO2017043194A1 (ja) | 2015-09-09 | 2016-07-22 | マッピング画像表示制御装置および方法並びにプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017043194A1 JPWO2017043194A1 (ja) | 2018-03-15 |
JP6434635B2 true JP6434635B2 (ja) | 2018-12-05 |
Family
ID=58239720
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017538907A Active JP6434635B2 (ja) | 2015-09-09 | 2016-07-22 | マッピング画像表示制御装置および方法並びにプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US10198875B2 (ja) |
JP (1) | JP6434635B2 (ja) |
DE (1) | DE112016003687T5 (ja) |
WO (1) | WO2017043194A1 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6396597B2 (ja) * | 2015-09-09 | 2018-09-26 | 富士フイルム株式会社 | マッピング画像表示制御装置および方法並びにプログラム |
KR20240064004A (ko) * | 2015-09-18 | 2024-05-10 | 아우리스 헬스, 인크. | 관형 조직망의 탐색 |
WO2020044840A1 (ja) * | 2018-08-31 | 2020-03-05 | 富士フイルム株式会社 | 領域分割装置、方法およびプログラム、類似度決定装置、方法およびプログラム、並びに特徴量導出装置、方法およびプログラム |
EP3975117A4 (en) * | 2020-07-30 | 2022-11-16 | Infervision Medical Technology Co., Ltd. | IMAGE SEGMENTATION METHOD AND APPARATUS AND IMAGE SEGMENTATION MODEL TRAINING METHOD AND APPARATUS |
CN112529976B (zh) * | 2020-11-26 | 2024-06-07 | 上海商汤智能科技有限公司 | 目标显示方法及装置、电子设备和存储介质 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7822461B2 (en) * | 2003-07-11 | 2010-10-26 | Siemens Medical Solutions Usa, Inc. | System and method for endoscopic path planning |
WO2007053676A2 (en) * | 2005-11-01 | 2007-05-10 | Edda Technology, Inc. | Method and system for liver lobe segmentation and pre-operative surgical planning |
JP5597429B2 (ja) * | 2010-03-31 | 2014-10-01 | 富士フイルム株式会社 | 医用画像処理装置および方法、並びにプログラム |
CN102395320B (zh) * | 2010-06-02 | 2014-02-26 | 奥林巴斯医疗株式会社 | 医疗设备以及医疗设备的控制方法 |
JP5559642B2 (ja) * | 2010-08-30 | 2014-07-23 | 富士フイルム株式会社 | 手術支援装置、手術支援方法および手術支援プログラム |
JP5748520B2 (ja) | 2011-03-25 | 2015-07-15 | 富士フイルム株式会社 | 内視鏡挿入支援装置およびその作動方法、並びに内視鏡挿入支援プログラム |
JP6080249B2 (ja) | 2012-09-13 | 2017-02-15 | 富士フイルム株式会社 | 3次元画像表示装置および方法並びにプログラム |
JP5777070B2 (ja) | 2012-09-14 | 2015-09-09 | 富士フイルム株式会社 | 領域抽出装置、領域抽出方法および領域抽出プログラム |
US9603668B2 (en) * | 2014-07-02 | 2017-03-28 | Covidien Lp | Dynamic 3D lung map view for tool navigation inside the lung |
-
2016
- 2016-07-22 DE DE112016003687.6T patent/DE112016003687T5/de active Pending
- 2016-07-22 JP JP2017538907A patent/JP6434635B2/ja active Active
- 2016-07-22 WO PCT/JP2016/071554 patent/WO2017043194A1/ja active Application Filing
-
2018
- 2018-03-01 US US15/909,001 patent/US10198875B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US10198875B2 (en) | 2019-02-05 |
US20180225884A1 (en) | 2018-08-09 |
WO2017043194A1 (ja) | 2017-03-16 |
JPWO2017043194A1 (ja) | 2018-03-15 |
DE112016003687T5 (de) | 2018-05-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6434635B2 (ja) | マッピング画像表示制御装置および方法並びにプログラム | |
CN110010249B (zh) | 基于视频叠加的增强现实手术导航方法、系统及电子设备 | |
JP7133474B2 (ja) | 内視鏡画像及び超音波画像の画像ベースの融合 | |
US11547499B2 (en) | Dynamic and interactive navigation in a surgical environment | |
US9563978B2 (en) | Image generation apparatus, method, and medium with image generation program recorded thereon | |
JP4931027B2 (ja) | 医用画像診断支援装置および方法、並びにプログラム | |
US9649167B2 (en) | Pattern and surgery support set, apparatus, method and program | |
JP5748636B2 (ja) | 画像処理装置および方法並びにプログラム | |
JP6008635B2 (ja) | 手術支援装置、方法およびプログラム | |
JP2008142481A (ja) | 肺を肺区域の単位に自動的にセグメンテーションする装置およびプログラム | |
Hansen et al. | Risk maps for liver surgery | |
JP2010000144A (ja) | 医用画像処理装置 | |
JP7235519B2 (ja) | 医用画像処理装置、医用画像処理方法、及び医用画像処理プログラム | |
JP2003339644A (ja) | 臓器の切除領域抽出表示装置 | |
US20190019433A1 (en) | Method and system for a preoperative surgical intervention simulation | |
JP6702902B2 (ja) | マッピング画像表示制御装置および方法並びにプログラム | |
JP6396597B2 (ja) | マッピング画像表示制御装置および方法並びにプログラム | |
CN117100393A (zh) | 一种用于视频辅助外科手术靶标定位的方法、系统和装置 | |
JP2012096085A (ja) | 医用画像診断支援装置および方法、並びにプログラム | |
US10062184B2 (en) | Medical image display control device, method of operation for same, and medical image display control program | |
JP2020520759A (ja) | ライブ2次元x線画像において介入装置の空間情報を提供する装置及び対応する方法 | |
JP7444569B2 (ja) | 鏡視下手術支援装置、鏡視下手術支援方法、及びプログラム | |
CN106600599B (zh) | 肿瘤包绕血管的包绕程度分析方法及装置 | |
JP5745390B2 (ja) | 画像処理装置、方法およびプログラム | |
JP2022128218A (ja) | 医用画像処理装置、医用画像処理方法、及び医用画像処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171018 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181016 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181108 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6434635 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |