JP6940620B2 - 立体手術画像の視差防止補正 - Google Patents
立体手術画像の視差防止補正 Download PDFInfo
- Publication number
- JP6940620B2 JP6940620B2 JP2019555878A JP2019555878A JP6940620B2 JP 6940620 B2 JP6940620 B2 JP 6940620B2 JP 2019555878 A JP2019555878 A JP 2019555878A JP 2019555878 A JP2019555878 A JP 2019555878A JP 6940620 B2 JP6940620 B2 JP 6940620B2
- Authority
- JP
- Japan
- Prior art keywords
- location
- image
- digital image
- digital
- controller
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001356 surgical procedure Methods 0.000 title claims description 44
- 238000012937 correction Methods 0.000 title description 17
- 230000002265 prevention Effects 0.000 title description 17
- 230000001419 dependent effect Effects 0.000 claims description 41
- 238000000034 method Methods 0.000 claims description 32
- 238000012014 optical coherence tomography Methods 0.000 claims description 32
- 238000012545 processing Methods 0.000 claims description 10
- 230000008859 change Effects 0.000 claims description 4
- 230000004044 response Effects 0.000 claims description 4
- 230000004438 eyesight Effects 0.000 description 10
- 230000003287 optical effect Effects 0.000 description 6
- 230000003190 augmentative effect Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 239000003550 marker Substances 0.000 description 5
- 230000000007 visual effect Effects 0.000 description 5
- 210000001525 retina Anatomy 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000002207 retinal effect Effects 0.000 description 2
- 208000002177 Cataract Diseases 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000000149 penetrating effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 210000003786 sclera Anatomy 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000004304 visual acuity Effects 0.000 description 1
- 210000000857 visual cortex Anatomy 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/13—Ophthalmic microscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0041—Operational features thereof characterised by display arrangements
- A61B3/0058—Operational features thereof characterised by display arrangements for multiple images
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/102—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for optical coherence tomography [OCT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/13—Ophthalmic microscopes
- A61B3/132—Ophthalmic microscopes in binocular arrangement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/20—Surgical microscopes characterised by non-optical aspects
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61F—FILTERS IMPLANTABLE INTO BLOOD VESSELS; PROSTHESES; DEVICES PROVIDING PATENCY TO, OR PREVENTING COLLAPSING OF, TUBULAR STRUCTURES OF THE BODY, e.g. STENTS; ORTHOPAEDIC, NURSING OR CONTRACEPTIVE DEVICES; FOMENTATION; TREATMENT OR PROTECTION OF EYES OR EARS; BANDAGES, DRESSINGS OR ABSORBENT PADS; FIRST-AID KITS
- A61F9/00—Methods or devices for treatment of the eyes; Devices for putting-in contact lenses; Devices to correct squinting; Apparatus to guide the blind; Protective devices for the eyes, carried on the body or in the hand
- A61F9/007—Methods or devices for eye surgery
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/0004—Microscopes specially adapted for specific applications
- G02B21/0012—Surgical microscopes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/18—Arrangements with more than one light path, e.g. for comparing two specimens
- G02B21/20—Binocular arrangements
- G02B21/22—Stereoscopic arrangements
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/361—Reproducing mixed stereoscopic images; Reproducing mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
- A61B2090/373—Surgical systems with images on a monitor during operation using light, e.g. by using optical scanners
- A61B2090/3735—Optical coherence tomography [OCT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20228—Disparity calculation for image-based rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30041—Eye; Retina; Ophthalmic
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Public Health (AREA)
- Ophthalmology & Optometry (AREA)
- Molecular Biology (AREA)
- Medical Informatics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Biophysics (AREA)
- Optics & Photonics (AREA)
- Analytical Chemistry (AREA)
- Chemical & Material Sciences (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Radiology & Medical Imaging (AREA)
- Signal Processing (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Pathology (AREA)
- Theoretical Computer Science (AREA)
- Vascular Medicine (AREA)
- Gynecology & Obstetrics (AREA)
- Microscoopes, Condenser (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- Closed-Circuit Television Systems (AREA)
- Eye Examination Apparatus (AREA)
- Medicines Containing Antibodies Or Antigens For Use As Internal Diagnostic Agents (AREA)
- Dental Preparations (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Description
Claims (17)
- 手術の際に画像を表示する方法であって、
左アナログ画像を手術顕微鏡の左接眼レンズ内において表示するステップであって、前記左アナログ画像は、前記手術顕微鏡の対物フィールドのものである、ステップと、
右アナログ画像を前記手術顕微鏡の右接眼レンズ内において表示するステップであって、前記右アナログ画像は、前記対物フィールドのものである、ステップと、
左デジタル画像及び右デジタル画像を生成するステップであって、前記左デジタル画像及び右デジタル画像は、それぞれ、前記左アナログ画像及び前記右アナログ画像との表示のためのオーバーレイコンテンツを含む、ステップと、
前記オーバーレイコンテンツ内の場所依存性特徴であって、前記左アナログ画像において該場所依存性特徴が前記右アナログ画像に対して変位させられる視差を見せる場所依存性特徴の第1通知を受け取るステップと、
前記第1通知に応答して、前記視差を回避するために前記左デジタル画像及び右デジタル画像の他方においてではなく前記左デジタル画像及び前記右デジタル画像のうちのただ1つにおいて前記場所依存性特徴を表示するステップと、
を有する方法。 - 前記対物フィールドは、前記手術顕微鏡を使用した手術を受けている患者を観察するべく、使用されており、且つ、前記場所依存性特徴は、前記患者の生体構造と関連付けられている請求項1に記載の方法。
- 前記生体構造は、前記患者の眼の一部分であり、且つ、前記手術は、眼科手術である請求項2に記載の方法。
- 前記場所依存性特徴と関連付けられた前記生体構造には、前記手術顕微鏡を使用して実行される光干渉断層撮影(OCT)スキャンが適用される請求項3に記載の方法。
- 前記場所依存性特徴を除去するべく、前記左デジタル画像及び前記右デジタル画像のうちの1つを規定する第2通知を受け取るステップ、
を更に有する請求項1に記載の方法。 - 前記場所依存性特徴を表示するステップは、
前記左デジタル画像及び前記右デジタル画像のうちの1つに対してデジタル処理を実行するステップ、
を更に有し、
前記デジタル処理は、
前記場所依存性特徴に対応する領域を識別するステップと、
前記識別された領域のコンテンツを変更するステップと、
を更に有する請求項1に記載の方法。 - 手術の際に画像を表示する手術顕微鏡であって、
手術の際に患者を観察する対物レンズであって、前記対物レンズの対物フィールドは、手術顕微鏡の左接眼レンズ内において、左アナログ画像として、且つ、前記手術顕微鏡の右接眼レンズ内において、右アナログ画像として、表示され、
前記右接眼レンズは、前記手術顕微鏡のユーザーの右眼による観察のためのものであり、
前記左接眼レンズは、前記ユーザーの左眼による観察のためのものである、対物レンズと、
左デジタル画像及び右デジタル画像を生成し、前記左デジタル画像及び前記右デジタル画像は、それぞれ、前記左アナログ画像及び前記右アナログ画像との表示のためのオーバーレイコンテンツを含み、
前記オーバーレイコンテンツ内の場所依存性特徴であって、前記左アナログ画像において該場所依存性特徴が前記右アナログ画像に対して変位させられる視差を見せる場所依存性特徴の第1通知を受け取り、且つ、
前記第1通知に応答して、前記視差を回避するために前記左デジタル画像及び右デジタル画像の他方においてではなく前記左デジタル画像及び前記右デジタル画像のうちのただ1つにおいて前記場所依存性特徴を除去することが、
可能であるコントローラと、
を有する手術顕微鏡。 - 前記対物フィールドは、前記手術顕微鏡を使用した手術を受けている患者を観察するべく使用され、且つ、前記場所依存性特徴は、前記患者の生体構造と関連付けられている請求項7に記載の手術顕微鏡。
- 前記生体構造は、前記患者の眼の一部分であり、且つ、前記手術は、眼科手術である請求項8に記載の手術顕微鏡。
- 前記場所依存性特徴内に含まれている前記生体構造には、前記手術顕微鏡を使用して実行される光干渉断層撮影(OCT)スキャンが適用される請求項9に記載の手術顕微鏡。
- 前記コントローラは、
前記場所依存性特徴を除去するべく、前記左デジタル画像及び前記右デジタル画像のうちの1つを規定する第2通知を受け取ることが、
更に可能である請求項7に記載の手術顕微鏡。 - 前記場所依存性特徴を除去することが可能である前記コントローラは、
前記左デジタル画像及び前記右デジタル画像のうちの1つに対してデジタル処理を実行することが可能である前記コントローラを更に含み、
前記デジタル処理は、
前記場所依存性特徴に対応する領域を識別するステップと、
前記識別された領域のコンテンツを変更するステップと、
を更に有する請求項8に記載の手術顕微鏡。 - 手術の際に画像を表示するコントローラであって、
左デジタル画像及び右デジタル画像を生成し、前記左デジタル画像及び前記右デジタル画像は、それぞれ、手術顕微鏡の左接眼レンズ及び右接眼レンズ内において表示される左アナログ画像及び右アナログ画像との表示のためのオーバーレイコンテンツを含み、
前記オーバーレイコンテンツ内の場所依存性特徴であって、前記左アナログ画像において該場所依存性特徴が前記右アナログ画像に対して変位させられる視差を見せる場所依存性特徴の第1通知を受け取り、且つ、
前記第1通知に応答して、前記視差を回避するために前記左デジタル画像及び右デジタル画像の他方においてではなく前記左デジタル画像及び前記右デジタル画像のうちのただ1つの前記場所依存性特徴を除去する、
ことが可能であるコントローラ。 - 前記手術顕微鏡の対物レンズの対物フィールドは、手術を受けている患者を観察するべく使用され、且つ、前記場所依存性特徴は、前記患者の生体構造と関連付けられている請求項13に記載のコントローラ。
- 前記生体構造は、前記患者の眼の一部分であり、且つ、前記手術は、眼科手術である請求項14に記載のコントローラ。
- 前記コントローラは、
前記場所依存性特徴を除去するべく、前記左デジタル画像及び前記右デジタル画像のうちの1つを規定する第2通知を受け取ることが、
更に可能である請求項13に記載のコントローラ。 - 前記場所依存性特徴を除去することが可能である前記コントローラは、
前記左デジタル画像及び前記右デジタル画像のうちの1つに対してデジタル処理を実行することが可能である前記コントローラを更に含み、
前記デジタル処理は、
前記場所依存性特徴に対応する領域を識別するステップと、
前記識別された領域のコンテンツを変更するステップと、
を更に有する請求項13に記載のコントローラ。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201762485515P | 2017-04-14 | 2017-04-14 | |
US62/485,515 | 2017-04-14 | ||
PCT/IB2018/052383 WO2018189630A1 (en) | 2017-04-14 | 2018-04-05 | Anti-parallax correction of stereoscopic surgical images |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020519922A JP2020519922A (ja) | 2020-07-02 |
JP6940620B2 true JP6940620B2 (ja) | 2021-09-29 |
Family
ID=62067751
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019555878A Active JP6940620B2 (ja) | 2017-04-14 | 2018-04-05 | 立体手術画像の視差防止補正 |
Country Status (8)
Country | Link |
---|---|
US (1) | US10449013B2 (ja) |
EP (1) | EP3609385B1 (ja) |
JP (1) | JP6940620B2 (ja) |
CN (1) | CN110520033A (ja) |
AU (1) | AU2018252275A1 (ja) |
CA (1) | CA3053728A1 (ja) |
ES (1) | ES2938389T3 (ja) |
WO (1) | WO2018189630A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11510750B2 (en) * | 2020-05-08 | 2022-11-29 | Globus Medical, Inc. | Leveraging two-dimensional digital imaging and communication in medicine imagery in three-dimensional extended reality applications |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11502037A (ja) * | 1995-05-17 | 1999-02-16 | ライカ ミクロスコピー ズュステーメ アーゲー | 顕微鏡 |
JP3637133B2 (ja) * | 1996-02-22 | 2005-04-13 | 株式会社東芝 | X線診断装置 |
DE102011015149B4 (de) * | 2011-03-25 | 2013-01-17 | Carl Zeiss Meditec Ag | Operationsmikroskopiesystem |
KR20130121520A (ko) * | 2012-04-27 | 2013-11-06 | 주식회사 고영테크놀러지 | 스테레오 현미경 시스템 |
JP2014175965A (ja) * | 2013-03-12 | 2014-09-22 | Panasonic Healthcare Co Ltd | 手術用カメラ |
US9645379B2 (en) * | 2014-12-29 | 2017-05-09 | Novartis Ag | Magnification in ophthalmic procedures and associated devices, systems, and methods |
EP3293972B1 (en) * | 2015-06-24 | 2023-08-30 | Sony Olympus Medical Solutions Inc. | Three-dimensional observation device for medical use, three-dimensional observation method for medical use, and program |
US20170035287A1 (en) * | 2015-08-04 | 2017-02-09 | Novartis Ag | Dynamic surgical data overlay |
US9826900B2 (en) * | 2015-08-17 | 2017-11-28 | Novartis Ag | Surgical microscope with integrated optical coherence tomography and display systems |
-
2018
- 2018-04-05 AU AU2018252275A patent/AU2018252275A1/en not_active Abandoned
- 2018-04-05 US US15/946,415 patent/US10449013B2/en active Active
- 2018-04-05 EP EP18720784.0A patent/EP3609385B1/en active Active
- 2018-04-05 CN CN201880024957.6A patent/CN110520033A/zh active Pending
- 2018-04-05 CA CA3053728A patent/CA3053728A1/en not_active Abandoned
- 2018-04-05 JP JP2019555878A patent/JP6940620B2/ja active Active
- 2018-04-05 WO PCT/IB2018/052383 patent/WO2018189630A1/en active Application Filing
- 2018-04-05 ES ES18720784T patent/ES2938389T3/es active Active
Also Published As
Publication number | Publication date |
---|---|
CA3053728A1 (en) | 2018-10-18 |
EP3609385B1 (en) | 2022-12-28 |
WO2018189630A1 (en) | 2018-10-18 |
US10449013B2 (en) | 2019-10-22 |
ES2938389T3 (es) | 2023-04-10 |
JP2020519922A (ja) | 2020-07-02 |
US20180296301A1 (en) | 2018-10-18 |
AU2018252275A1 (en) | 2019-09-05 |
CN110520033A (zh) | 2019-11-29 |
EP3609385A1 (en) | 2020-02-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9645379B2 (en) | Magnification in ophthalmic procedures and associated devices, systems, and methods | |
Shen et al. | Novel microscope-integrated stereoscopic heads-up display for intrasurgical optical coherence tomography | |
CN107920918B (zh) | 玻璃体视网膜手术期间扫描图像的控制 | |
US10460457B2 (en) | Adaptive adjustment of overlay image parameters | |
US10064549B2 (en) | Binocular en face optical coherence tomography imaging | |
JP6974338B2 (ja) | 網膜硝子体oct画像の解像度向上 | |
JP7458343B2 (ja) | 光学コヒーレンストモグラフィを使用した硝子体網膜特徴付け | |
US10398307B2 (en) | Curvature of field transformation of OCT images during vitreoretinal surgery | |
EP3984016A1 (en) | Systems and methods for superimposing virtual image on real-time image | |
CN109414168A (zh) | 手术显微镜中的光学和数字可视化 | |
JP6940620B2 (ja) | 立体手術画像の視差防止補正 | |
Shen et al. | Novel microscope-integrated stereoscopic display for intrasurgical optical coherence tomography |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191011 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20191227 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20200128 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20200212 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201012 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201201 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210226 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210803 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210902 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6940620 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |