JP2016537612A - モデリング構成及び三次元表面のトポグラフィーをモデリングする方法及びシステム - Google Patents
モデリング構成及び三次元表面のトポグラフィーをモデリングする方法及びシステム Download PDFInfo
- Publication number
- JP2016537612A JP2016537612A JP2016516614A JP2016516614A JP2016537612A JP 2016537612 A JP2016537612 A JP 2016537612A JP 2016516614 A JP2016516614 A JP 2016516614A JP 2016516614 A JP2016516614 A JP 2016516614A JP 2016537612 A JP2016537612 A JP 2016537612A
- Authority
- JP
- Japan
- Prior art keywords
- light source
- modeling
- camera
- electromagnetic radiation
- coherent
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012876 topography Methods 0.000 title claims abstract description 18
- 238000000034 method Methods 0.000 title claims description 40
- 230000001427 coherent effect Effects 0.000 claims abstract description 39
- 230000005670 electromagnetic radiation Effects 0.000 claims abstract description 36
- 230000003287 optical effect Effects 0.000 claims description 37
- 238000012545 processing Methods 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 8
- 230000015654 memory Effects 0.000 description 16
- 238000012546 transfer Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 6
- 238000005259 measurement Methods 0.000 description 6
- 230000005855 radiation Effects 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 3
- 230000007704 transition Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 238000005094 computer simulation Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 239000011435 rock Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/25—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/22—Measuring arrangements characterised by the use of optical techniques for measuring depth
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/25—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
- G01B11/2504—Calibration devices
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/25—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
- G01B11/2509—Color coding
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/25—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
- G01B11/2513—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object with several lines being projected in more than one direction, e.g. grids, patterns
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/25—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
- G01B11/2531—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object using several gratings, projected with variable angle of incidence on the object, and one detection device
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C11/00—Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/521—Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Optics & Photonics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
Description
Claims (18)
- 三次元表面のトポグラフィーをモデリングするためのモデリング構成であって、
実質的に単色かつコヒーレントな電磁放射を生成するように構成される光源と、
前記光源によって放出される波長と共に、人間の眼によって検出される波長で、モデリングされる表面を撮像するように構成されるカメラと、
前記光源と接続される格子と、を備え、
前記光源及び前記光源と接続される格子は、モデリングされる前記表面上の既知の形状の回折パターンを生成するように共に構成される、
モデリング構成。 - 前記モデリング構成は、前記カメラの光軸と回折軸との相対的な方向が既知であり、かつ前記カメラの光軸の開始点への前記格子の出力点の位置、距離及び方向が既知であるように較正され、前記較正は、前記カメラのレンズの光学歪みを補正する較正情報を考慮する請求項1に記載のモデリング構成。
- 前記光源は、1つの波長を生成するように構成される請求項1又は2に記載のモデリング構成。
- 前記光源は、1より多い波長を生成するように構成される請求項1又は2に記載のモデリング構成。
- 前記光源は、実質的に単色かつコヒーレントな赤色の電磁放射、実質的に単色かつコヒーレントな緑色の電磁放射、実質的に単色かつコヒーレントな青色の電磁放射を同時に放出するように構成される請求項4に記載のモデリング構成。
- 3つの光源及び各光源と接続される格子を備え、
第1の光源は、実質的に単色かつコヒーレントな赤色の電磁放射を放出するように構成され、第2の光源は、実質的に単色かつコヒーレントな緑色の電磁放射を放出するように構成され、第3の光源は、実質的に単色かつコヒーレントな青色の電磁放射を放出するように構成される請求項1又は2に記載のモデリング構成。 - 三次元表面のトポグラフィーをモデリングするための方法であって、
光源によって放出される波長と共に、人間の眼によって検出される波長で、モデリングされる表面を撮像するように構成されるカメラと、実質的に単色及びコヒーレントな電磁放射を生成するように構成される光源と、前記光源と接続される格子と、を備える較正されたモデリング構成を用いるステップであって、前記較正後に、前記カメラの光軸と回折軸との相対的な方向が既知であり、かつ前記カメラの光軸の開始点への前記格子の出力点の位置、距離及び方向が既知であり、前記光源及び前記光源と接続される格子は、モデリングされる前記表面上の既知の形状の回折パターンを生成するように共に構成される、ステップと、
前記カメラにより、前記回折パターンが前記モデリング構成により生成される、モデリングされる表面の第1の写真を撮るステップと、
前記第1の写真の前記回折パターンにより生成される点のネットワークの点を識別するステップと、
各点について深さ位置を算出するステップと、
を備える方法。 - 前記光源は、1つの波長を生成するように構成される請求項7に記載の方法。
- 前記光源は、1より多い波長を生成するように構成される請求項7に記載の方法。
- 前記光源は、実質的に単色かつコヒーレントな赤色の電磁放射、実質的に単色かつコヒーレントな緑色の電磁放射、実質的に単色かつコヒーレントな青色の電磁放射を同時に放出するように構成される請求項9に記載の方法。
- 3つの光源及び各光源と接続される格子を備え、
第1の光源は、実質的に単色かつコヒーレントな赤色の電磁放射を放出するように構成され、第2の光源は、実質的に単色かつコヒーレントな緑色の電磁放射を放出するように構成され、第3の光源は、実質的に単色かつコヒーレントな青色の電磁放射を放出するように構成される請求項7に記載の方法。 - モデリングされる表面上の前記回折パターンを投影せずに、前記カメラにより、モデリングされる表面の第2の写真を撮るステップと、
前記第2の写真の対応する画素を補間することにより、前記点のネットワークの点についてのRGB値を与えるステップと、
を更に備える請求項11に記載の方法。 - 前記回折パターンにより生成される点のネットワークの点の識別は、1つの回折源により放出されるいくつかの異なる波長により形成される点の色順序を用いて行われる請求項9から12のいずれか一項に記載の方法。
- 三次元表面のトポグラフィーをモデリングするための方法であって、
光源によって放出される波長と共に、人間の眼によって検出される波長で、モデリングされる表面を撮像するように構成されるカメラと、実質的に単色及びコヒーレントな電磁放射を生成するように構成される光源と、前記光源と接続される格子と、を備えるモデリング構成からの較正情報を用いるステップであって、前記較正情報は、前記カメラの光軸と回折軸との相対的な方向、並びに前記カメラの光軸の開始点への前記格子の出力点の位置、距離及び方向と共に、前記モデリング構成により生成される回折パターンの形状を示し、前記較正情報は、前記カメラのレンズの光学歪みを補正する、ステップと、
前記回折パターンが前記モデリング構成により生成される、モデリングされる表面の第1の写真を解析するステップと、
前記第1の写真の前記回折パターンにより生成される点のネットワークの点を識別するステップと、
各点について深さ位置を算出するステップと、
を備える方法。 - 同一の位置から前記カメラにより撮られる、モデリングされる表面の第2の写真を分析するステップであって、前記第2の写真は、モデリングされる表面に投影される回折パターンを含まない、ステップと、
前記第2の写真の対応する画素を補間することにより、前記点のネットワークの点についてのRGB値を与えるステップと、
を更に備える請求項14に記載の方法。 - 前記回折パターンにより生成される点のネットワークの点の識別は、1つの回折源により放出されるいくつかの異なる波長により形成される点の色順序を用いて行われる請求項14又は15に記載の方法。
- プログラムコードがプロセッサにより実行されるときに、請求項14から16のいずれか一項に記載の方法を実行するように構成される前記プログラムコードを備える、コンピュータプログラム。
- 三次元表面のトポグラフィーをモデリングするためのシステムであって、
請求項1から6のいずれか一項に記載の前記モデリング構成と、
請求項14から16のいずれか一項に記載の方法を実行するために手段を備えるデータ処理装置と、
を備えるシステム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FI20135961 | 2013-09-25 | ||
FI20135961A FI131015B1 (fi) | 2013-09-25 | 2013-09-25 | Mallinnusjärjestely ja menetelmät ja järjestelmä kolmiulotteisen pinnan topografian mallintamiseksi |
PCT/FI2014/050730 WO2015044524A1 (en) | 2013-09-25 | 2014-09-25 | Modeling arrangement and methods and system for modeling the topography of a three-dimensional surface |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016537612A true JP2016537612A (ja) | 2016-12-01 |
JP6612740B2 JP6612740B2 (ja) | 2019-11-27 |
Family
ID=52003816
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016516614A Active JP6612740B2 (ja) | 2013-09-25 | 2014-09-25 | モデリング構成及び三次元表面のトポグラフィーをモデリングする方法及びシステム |
Country Status (5)
Country | Link |
---|---|
US (1) | US20160238377A1 (ja) |
EP (1) | EP3049756B1 (ja) |
JP (1) | JP6612740B2 (ja) |
FI (1) | FI131015B1 (ja) |
WO (1) | WO2015044524A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20210019486A (ko) * | 2018-06-07 | 2021-02-22 | 라디모 오와이 | 삼차원 표면의 토포그래피의 모델링 |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10612912B1 (en) * | 2017-10-31 | 2020-04-07 | Facebook Technologies, Llc | Tileable structured light projection system |
US10521926B1 (en) | 2018-03-21 | 2019-12-31 | Facebook Technologies, Llc | Tileable non-planar structured light patterns for wide field-of-view depth sensing |
CN108645392B (zh) * | 2018-07-16 | 2024-02-06 | 西安微普光电技术有限公司 | 一种相机安装姿态校准方法及装置 |
WO2020093321A1 (zh) * | 2018-11-08 | 2020-05-14 | 成都频泰鼎丰企业管理中心(有限合伙) | 三维测量设备 |
US10866322B2 (en) * | 2018-12-31 | 2020-12-15 | Datalogic Usa, Inc. | Identification of shadowing on flat-top volumetric objects scanned by laser scanning devices |
KR20210126738A (ko) | 2019-02-20 | 2021-10-20 | 트리나미엑스 게엠베하 | 적어도 하나의 대상체를 조명하기 위한 프로젝터를 구비하는 검출기 |
US20230078604A1 (en) | 2020-01-31 | 2023-03-16 | Trinamix Gmbh | Detector for object recognition |
CN111538353B (zh) * | 2020-05-12 | 2021-10-19 | 南京航空航天大学 | 一种隧道检测车稳定装置 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003519786A (ja) * | 2000-01-10 | 2003-06-24 | マサチューセッツ インスティテュート オブ テクノロジー | 表面輪郭測定のための装置および方法 |
US20040119035A1 (en) * | 2002-12-20 | 2004-06-24 | Hongzhi Kong | Object surface characterization using optical triangulaton and a single camera |
US20040125205A1 (en) * | 2002-12-05 | 2004-07-01 | Geng Z. Jason | System and a method for high speed three-dimensional imaging |
US20050128196A1 (en) * | 2003-10-08 | 2005-06-16 | Popescu Voicu S. | System and method for three dimensional modeling |
JP2013513179A (ja) * | 2009-12-08 | 2013-04-18 | キネテイツク・リミテツド | 距離に基づく検知 |
JP2013079854A (ja) * | 2011-10-03 | 2013-05-02 | Topcon Corp | 3次元計測システム及び3次元計測方法 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6690474B1 (en) * | 1996-02-12 | 2004-02-10 | Massachusetts Institute Of Technology | Apparatus and methods for surface contour measurement |
US6603561B2 (en) * | 2001-02-20 | 2003-08-05 | Thomas D. Ditto | Chromatic diffraction range finder |
US7002699B2 (en) * | 2004-02-23 | 2006-02-21 | Delphi Technologies, Inc. | Identification and labeling of beam images of a structured beam matrix |
EP1875162B1 (en) * | 2005-04-06 | 2014-06-11 | Dimensional Photonics International, Inc. | Determining positional error of an optical component using structured light patterns |
EP2977719A1 (en) * | 2007-08-17 | 2016-01-27 | Renishaw plc | Non-contact measurement apparatus and method |
US8717417B2 (en) * | 2009-04-16 | 2014-05-06 | Primesense Ltd. | Three-dimensional mapping and imaging |
JP6041513B2 (ja) * | 2012-04-03 | 2016-12-07 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
US20140111616A1 (en) * | 2012-10-21 | 2014-04-24 | Ilya Blayvas | Structured light 3D scanner with refractive non-absorbing pattern forming element |
-
2013
- 2013-09-25 FI FI20135961A patent/FI131015B1/fi active
-
2014
- 2014-09-25 EP EP14806335.7A patent/EP3049756B1/en active Active
- 2014-09-25 WO PCT/FI2014/050730 patent/WO2015044524A1/en active Application Filing
- 2014-09-25 JP JP2016516614A patent/JP6612740B2/ja active Active
- 2014-09-25 US US15/024,141 patent/US20160238377A1/en active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003519786A (ja) * | 2000-01-10 | 2003-06-24 | マサチューセッツ インスティテュート オブ テクノロジー | 表面輪郭測定のための装置および方法 |
US20040125205A1 (en) * | 2002-12-05 | 2004-07-01 | Geng Z. Jason | System and a method for high speed three-dimensional imaging |
US20040119035A1 (en) * | 2002-12-20 | 2004-06-24 | Hongzhi Kong | Object surface characterization using optical triangulaton and a single camera |
US20050128196A1 (en) * | 2003-10-08 | 2005-06-16 | Popescu Voicu S. | System and method for three dimensional modeling |
JP2013513179A (ja) * | 2009-12-08 | 2013-04-18 | キネテイツク・リミテツド | 距離に基づく検知 |
JP2013079854A (ja) * | 2011-10-03 | 2013-05-02 | Topcon Corp | 3次元計測システム及び3次元計測方法 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20210019486A (ko) * | 2018-06-07 | 2021-02-22 | 라디모 오와이 | 삼차원 표면의 토포그래피의 모델링 |
JP2021527285A (ja) * | 2018-06-07 | 2021-10-11 | ラディモ・オサケイフティオ | 3次元表面のトポグラフィのモデリング |
US11561088B2 (en) | 2018-06-07 | 2023-01-24 | Pibond Oy | Modeling the topography of a three-dimensional surface |
KR102561089B1 (ko) * | 2018-06-07 | 2023-07-27 | 라디모 오와이 | 삼차원 표면의 토포그래피의 모델링 |
JP7439070B2 (ja) | 2018-06-07 | 2024-02-27 | ラディモ・オサケイフティオ | 3次元表面のトポグラフィのモデリング |
Also Published As
Publication number | Publication date |
---|---|
EP3049756B1 (en) | 2021-12-01 |
FI131015B1 (fi) | 2024-07-31 |
US20160238377A1 (en) | 2016-08-18 |
FI20135961A (fi) | 2015-03-26 |
WO2015044524A1 (en) | 2015-04-02 |
EP3049756A1 (en) | 2016-08-03 |
JP6612740B2 (ja) | 2019-11-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6612740B2 (ja) | モデリング構成及び三次元表面のトポグラフィーをモデリングする方法及びシステム | |
CN108759669B (zh) | 一种室内自定位三维扫描方法及系统 | |
US8923603B2 (en) | Non-contact measurement apparatus and method | |
EP1364226B1 (en) | Apparatus and method for obtaining three-dimensional positional data from a two-dimensional captured image | |
WO2021140886A1 (ja) | 三次元モデル生成方法、情報処理装置およびプログラム | |
CA2577840C (en) | A method for automated 3d imaging | |
JP3624353B2 (ja) | 3次元形状計測方法およびその装置 | |
JP2011516849A (ja) | 3d撮像システム | |
CN112254670B (zh) | 一种基于光扫描和智能视觉融合的3d信息采集设备 | |
JP2016100698A (ja) | 校正装置、校正方法、プログラム | |
JP4852006B2 (ja) | 空間情報データベース生成装置及び空間情報データベース生成プログラム | |
Bergström et al. | Automatic in-line inspection of shape based on photogrammetry | |
US7046839B1 (en) | Techniques for photogrammetric systems | |
Gillihan | Accuracy Comparisons of iPhone 12 Pro LiDAR Outputs | |
JP2006308452A (ja) | 3次元形状計測方法および装置 | |
JP2004170277A (ja) | 3次元計測方法、3次元計測システム、画像処理装置、及びコンピュータプログラム | |
JP4784270B2 (ja) | 三次元計測方法、計測装置、復元方法および復元装置 | |
US11561088B2 (en) | Modeling the topography of a three-dimensional surface | |
Midulla | Bifocal Pairs of Images for Low-Cost Survey in Close Range Photogrammetry | |
CN117274395A (zh) | 相机的标定产测一体化方法、系统、电子设备和存储介质 | |
AU2005279700B2 (en) | A method for automated 3D imaging | |
Jankowicz | The influence of recording of long-series images taken from non-metric cameras on increasing the quality of modelling objects with their surroundings | |
Giardino et al. | Computer Vision in Cultural Heritage: a versatile and inexpensive tool |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170919 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20171116 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20171116 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180730 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180807 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20181107 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20181228 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190206 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190312 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20190611 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20190813 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20191008 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191031 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6612740 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S201 | Request for registration of exclusive licence |
Free format text: JAPANESE INTERMEDIATE CODE: R314201 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |