JP6472370B2 - 3次元(3d)シーン画像を生成するシステム及び方法 - Google Patents

3次元(3d)シーン画像を生成するシステム及び方法 Download PDF

Info

Publication number
JP6472370B2
JP6472370B2 JP2015236491A JP2015236491A JP6472370B2 JP 6472370 B2 JP6472370 B2 JP 6472370B2 JP 2015236491 A JP2015236491 A JP 2015236491A JP 2015236491 A JP2015236491 A JP 2015236491A JP 6472370 B2 JP6472370 B2 JP 6472370B2
Authority
JP
Japan
Prior art keywords
scene
mimo
array
data
subset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2015236491A
Other languages
English (en)
Other versions
JP2016130726A5 (ja
JP2016130726A (ja
Inventor
デホン・リウ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of JP2016130726A publication Critical patent/JP2016130726A/ja
Publication of JP2016130726A5 publication Critical patent/JP2016130726A5/ja
Application granted granted Critical
Publication of JP6472370B2 publication Critical patent/JP6472370B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B7/00Radio transmission systems, i.e. using radiation field
    • H04B7/02Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas
    • H04B7/04Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas
    • H04B7/0413MIMO systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/89Radar or analogous systems specially adapted for specific applications for mapping or imaging
    • G01S13/90Radar or analogous systems specially adapted for specific applications for mapping or imaging using synthetic aperture techniques, e.g. synthetic aperture radar [SAR] techniques
    • G01S13/904SAR modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B7/00Radio transmission systems, i.e. using radiation field
    • H04B7/02Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas
    • H04B7/04Diversity systems; Multi-antenna system, i.e. transmission or reception using multiple antennas using two or more spaced independent antennas
    • H04B7/0413MIMO systems
    • H04B7/0456Selection of precoding matrices or codebooks, e.g. using matrices antenna weighting
    • H04B7/0478Special codebook structures directed to feedback optimisation
    • H04B7/0479Special codebook structures directed to feedback optimisation for multi-dimensional arrays, e.g. horizontal or vertical pre-distortion matrix index [PMI]

Landscapes

  • Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Mathematical Physics (AREA)
  • Radar Systems Or Details Thereof (AREA)
  • Radio Transmission System (AREA)
  • Computer Graphics (AREA)
  • Theoretical Computer Science (AREA)

Description

本発明は、包括的には3D撮像に関し、より詳細には、アンテナのMIMOアレイの使用、及び圧縮センシング(CS(compressive sensing))に基づく3D画像再構成に関する。
従来の単一チャネル仮想アンテナアレイシステムは、広帯域無線周波数(RF)信号及び大きな合成開口(synthetic aperture)を用いて、2次元(2D)距離−方位画像(2D range-azimuth image)を生成する。高度情報を一切有しない2D方位画像は、2D距離−方位平面への3Dシーンの投影である。したがって、3D地形等のシーンの3D構造は、投影後に保持されない。加えて、この投影は、レイオーバー(layover)及びシャドーイング(shadowing)等の幾つかのアーチファクト(artifact(人工物))を生じる場合がある。レイオーバーアーチファクトでは、様々な仰角を有する幾つかの地形パッチが同じ距離−方位セルにマッピングされる。シャドーイングアーチファクトでは、幾つかのエリアは、遮蔽構造に起因してアレイ撮像システムによって可視でない。これらのアーチファクトは、干渉法によるアレイ撮像技法を用いる場合であっても、単一ベースライン観測によって解消することができない。
3D撮像を行うために、高度次元において多重ベースライン観測が必要である。多重ベースライン観測は、単一チャネルプラットフォームの複数のパス、又は複数チャネルプラットフォームの単一のパスによって取得することができる。
3D撮像機能を有する複数チャネルプラットフォームとしての移動MIMOシステムは以下の利点を有する。第1に、MIMOアレイの複数のアンテナによって、自由度が大幅に増大する。第2に、移動MIMOプラットフォームによって、クロストラックサンプリングを満たすためのはるかに多くの送信機−受信機の組み合わせを提供することができ、結果として高度分解能が大幅に改善される。
しかしながら、移動MIMOアレイプラットフォームも幾つかのトレードオフを被る。第1に、同時送信チャネルの総数は、自己干渉を回避するように制限される。従来のMIMOアレイの場合、送信要素は通常固定される。第2に、移動MIMOアレイの空間ロケーションは、運動誤差を受ける。これによって、補償されないままであるとき、不明瞭性及び焦点ぼけが生じ得る。
図1に示すように、通常、方位(y)方向に沿って動く(120)従来のMIMOアレイシステム110は、様々な高度において、点散乱体130を用いてシーンの3D画像を生成する。速度ベクトルの大きさは一定であり、方向は直線である。アレイは、固定の受信機(×、◆)と、通常、アレイの各端部に固定の送信機(×)とを含む。
図2は、従来の3D撮像方法を示す。ここで、MIMOアレイは、一定の速度で移動しており、送信機及び受信機は固定である。すなわち、アレイの全ての送信機及び受信機は、送信及び受信の間、同じである。送信機は、無線周波数(RF)信号をシーン上に送出し、これらは反射され、受信機によって受信される。受信したRF信号210に対応するデータ211を用いて、アラインされた(230)2D画像221を生成する(220)。次に、アラインされた画像に3D画像再構成が適用され、3D画像241が得られる。
本発明の実施形態は、1組のアンテナを備えた移動多入力多出力(MIMO)線形アレイを用いた3D撮像のためのシステム及び方法を提供する。移動MIMOアレイは、ランダム送信チャネルを用い、圧縮センシング(CS)ベースの撮像を適用して、ランダムチャネル及び運動誤差を考慮に入れて3D撮像問題に対処する。
特に、実施形態は、理想直線トラックに沿うが、変動する速度及びアクロストラックジッターを伴って動くアクロストラック線形MIMOアレイを用いる。
送信チャネルに対する制限を考慮すると、送信チャネルの総数は、従来の移動MIMOアレイのように制限される。しかしながら、本発明の実施形態によれば、送信アンテナ及び受信アンテナの部分組(subset)はランダムに選択される。このランダム選択によって、改善された撮像性能で、MIMOデータ収集における更なる自由度が提供される。
MIMOアレイの速度変動に起因して、有効仮想アレイは、方位方向及び距離方向においてランダムジッターを有して空間的に一様分布する。ランダム性によって、線形測定値がコヒーレントでなく、シーン情報を完全に捕捉することが確実になる。このため、測定は、観測下のシーンを復元するのに適切な正則化を用いて、非線形圧縮センシングに基づく再構成プロセスによって反転することができる。
理想完全チャネル動作と比較して、収集データはチャネル制約に起因してランダムな送信チャネルが欠落しており、ジッターに起因して非一様な空間位置においてサンプリングされる。収集データは、その全体を処理され、圧縮センシングに基づく反復3D撮像を用いて高分解能の3D画像が生成される。
本システムは従来のシステムを上回る幾つかの利点を提供する。第1に、本システムは、送信チャネルにおいて、従来の移動MIMOシステムよりも多くの自由度を提供する。第2に、CSベースの方法は、ランダム送信チャネル及び運動誤差に対処し、速度変動及びロケーションジッターによって生じる不明瞭性を抑制することを可能にし、この結果、従来の方法を用いて得られるよりも高い分解能の画像をもたらす。第3に、本システムは、より少ないチャネルを用いて3D撮像を行うことができ、これによって、データ収集の時間及び費用が節減し、完全チャネル動作に匹敵する撮像性能を提供する。チャネルの総数の低減によって、撮像されるシーンの大きさを増大させるか、又はより高い分解能を提供することができる。
従来のMIMOレーダー撮像の概略図である。 従来の移動MIMOシステム及び方法のブロック図である。 本発明の実施形態による、圧縮センシングベースの3D撮像の概略図である。 本発明の実施形態による、移動MIMOアレイを用いた3D画像を生成するシステム及び方法のブロック図である。
本発明の実施形態は、1組のアンテナを備えた移動多入力多出力(MIMO)線形アレイを用いた3D撮像のためのシステム及び方法を提供する。移動MIMOアレイは、ランダム送信チャネルを用い、圧縮センシング(CS)ベースの撮像を適用して、ランダムチャネル及び運動誤差を考慮に入れて3D撮像問題に対処する。
図3に示すように、移動している(320)MIMOアレイ310によって収集されるデータを検討する。アレイの向きは、高度(z)方向に平行である。アレイは、ランダムに選択された送信アンテナ(×)及び受信アンテナ(×、◆)の部分組を含む。送信アンテナは、信号が送信された後にRF信号を受信するのにも用いることができることに留意されたい。アレイは、方位方向及び高度方向においてランダムクロストラックジッターを受ける可能性がある。これらは本発明の実施形態によって補正される。
図4は、本発明の実施形態による3D撮像方法を示す。本方法は、送信アンテナ及び受信アンテナとして、1組のアンテナの部分組310を選択する(410)。次に、MIMOアレイが変動する速度で移動している間、送信アンテナの部分組を用いて、無線周波数(RF)信号が、反射器402を含むシーン401上に送信される。MIMOアレイは、移動中、ジッターを受け、このため速度の大きさ及び方向の双方が変動する。
反射されたRF信号は、MIMOデータ411として受信アンテナの部分組において受信される。MIMOデータ411は、アラインされたMIMOデータを生成するようにアラインされる(440)。MIMOデータは時間において一様にサンプリングされる。次に、圧縮センシング(CS)ベースの再構成手順が、アラインされたMIMOデータに適用され(450)、シーンの3D画像451が生成される。
上記のステップは、当該技術分野において既知のように、バスによって、データ411及び421を記憶するためのメモリと、入/出力インターフェースと、アンテナとに接続されるプロセッサ400において実行することができる。
一般的に、全てのアンテナはデータを送信及び受信することができる。しかしながら、送信信号間の干渉を回避するために、送信チャネルはRFパルス送信ごとに制限されている。従来の移動MIMOシステムの場合、これらの送信チャネルは、幾つかの送信アンテナに固定される。本発明によるシステムでは、全ての利用可能なアンテナの組からランダムに選択された、例えば2つの送信アンテナによって直交信号が送信されると仮定し、これにより更なる柔軟性及び潜在的により良好な撮像性能がもたらされる。
パルス繰り返し周波数(PRF)は、MIMOアレイの移動中、固定されている。しかしながら、MIMOアレイの空間ジッターに起因して、有効な空間サンプリングロケーションは直線において一様でない。
CSベースの画像再構成は、シーンのスパース性を利用する反復手順を用いて欠落データを埋め、すなわちほとんどのデータ要素はゼロであり、次に全ての(全部の又は完全な)データに対し、高速距離移動撮像を行う。
結果は、本発明によるシステム及びCSベースの方法を用いて、速度変動及びロケーションジッターによって生じる曖昧性を抑制し、従来のシステム及び方法を用いるよりも高分解能の画像をもたらすことができることを実証している。さらに、従来のMIMOシステムよりも少ないチャネルを用いて3D撮像を行うことができ、これによって、データ収集のための時間及び費用が節減され、完全チャネル動作に匹敵する撮像性能が提供される。チャネルの総数の低減によって、より大きなシーン又はより高い分解能を撮像する可能性も提供される。

Claims (11)

  1. 1組のアンテナを含むMIMOアレイを用いてシーンの3次元(3D)画像を生成する方法であって、
    送信アンテナの部分組及び受信アンテナの部分組として前記アンテナの少なくとも1つの部分組を選択するステップと、
    前記MIMOアレイが変動する速度で移動している間、前記送信アンテナの部分組を用いて前記シーン内に無線周波数(RF)信号を送信するステップと、
    前記受信アンテナの部分組において、前記シーンによって反射される前記RF信号をMIMOデータとして受信するステップと、
    前記MIMOデータをアライン及び正則化するステップと、
    圧縮センシング(CS)ベースの再構成手順をアラインされた前記MIMOデータに適用して前記シーンの前記3D画像を生成するステップと、
    を含む、3次元(3D)シーン画像を生成する方法。
  2. 前記MIMOデータは、時間において一様にサンプリングされる、請求項1に記載の方法。
  3. 前記MIMOアレイの向きは固定である、請求項1に記載の方法。
  4. 前記MIMOアレイは、方位方向及び高度方向においてランダムジッターを受ける、請求項1に記載の方法。
  5. 全てのデータは全体として、前記圧縮センシング(CS)ベースの再構成手順によって処理される、請求項1に記載の方法。
  6. 前記圧縮センシング法は、反復再構成法である、請求項1に記載の方法。
  7. 前記変動する速度は、方位方向及び距離方向のランダムジッターを伴って前記アレイを空間的にかつ一様に分散させる、請求項1に記載の方法。
  8. 前記MIMOアレイは線形である、請求項1に記載の方法。
  9. 送信される前記RF信号は直交である、請求項1に記載の方法。
  10. 前記シーンのスパース性を利用することによって、反復手順を用いて欠落データを埋めることを更に含む、請求項1に記載の方法。
  11. 1組のアンテナを含むMIMOアレイを用いてシーンの3次元(3D)シーン画像を生成するシステムであって、
    前記MIMOアレイが変動する速度で移動している間、前記シーン内へRF信号を受信するように構成される、受信アンテナの部分組と、
    前記シーンによって反射される前記RF信号を、MIMOデータとして、受信するように構成される、受信アンテナの他の部分組と、
    前記MIMOデータをアライン及び正則化し、圧縮センシング(CS)ベースの再構成手順をアラインされた前記MIMOデータに適用して前記シーンの前記3D画像を生成するように構成されるプロセッサと、
    を備える、3次元(3D)シーン画像を生成するシステム。
JP2015236491A 2015-01-12 2015-12-03 3次元(3d)シーン画像を生成するシステム及び方法 Expired - Fee Related JP6472370B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/594,316 2015-01-12
US14/594,316 US9948362B2 (en) 2015-01-12 2015-01-12 System and method for 3D imaging using a moving multiple-input multiple-output (MIMO) linear antenna array

Publications (3)

Publication Number Publication Date
JP2016130726A JP2016130726A (ja) 2016-07-21
JP2016130726A5 JP2016130726A5 (ja) 2018-11-01
JP6472370B2 true JP6472370B2 (ja) 2019-02-20

Family

ID=56368276

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015236491A Expired - Fee Related JP6472370B2 (ja) 2015-01-12 2015-12-03 3次元(3d)シーン画像を生成するシステム及び方法

Country Status (2)

Country Link
US (1) US9948362B2 (ja)
JP (1) JP6472370B2 (ja)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9864054B2 (en) * 2014-03-10 2018-01-09 Mitsubishi Electric Research Laboratories, Inc. System and method for 3D SAR imaging using compressive sensing with multi-platform, multi-baseline and multi-PRF data
US10690760B2 (en) 2015-05-05 2020-06-23 Vayyar Imaging Ltd System and methods for three dimensional modeling of an object using a radio frequency device
CN109565304B (zh) * 2016-07-08 2023-04-07 马格纳电子系统公司 用于车辆的2d mimo雷达系统
EP3755216A4 (en) * 2018-02-22 2021-04-21 Vayyar Imaging Ltd. DETECTION AND MEASUREMENT OF CORRELATED MOTION WITH MIMO RADAR
IT201800006797A1 (it) * 2018-06-29 2019-12-29 Radar ad apertura sintetica basato a terra (gbsar) con antenne multiple in trasmissione e ricezione (mimo)e facente uso della tecnica di elaborazione detta compressive sensing (cs).
JP7303878B2 (ja) * 2018-12-12 2023-07-05 華為技術有限公司 信号処理方法、レーダシステム、及び車両
US10962639B2 (en) * 2019-01-11 2021-03-30 Isaac Weissman Smallsat surveillance constellation using MIMO radar
US11094114B2 (en) 2019-02-08 2021-08-17 Ursa Space Systems Inc. Satellite SAR artifact suppression for enhanced three-dimensional feature extraction, change detection, and visualizations
CN110146878A (zh) * 2019-04-16 2019-08-20 杭州电子科技大学 基于乘性正则化的背景介质迭代更新的定量微波成像方法
US11360210B2 (en) * 2019-07-02 2022-06-14 Intel Corporation Multi-mode multi-input multi-output (MIMO) radar sensors
CN112578342A (zh) * 2019-09-30 2021-03-30 华为技术有限公司 一种信号发送方法、信号处理方法及雷达装置

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05288843A (ja) * 1992-04-14 1993-11-05 Nec Corp 干渉型合成開口レーダ装置
US6919839B1 (en) * 2004-11-09 2005-07-19 Harris Corporation Synthetic aperture radar (SAR) compensating for ionospheric distortion based upon measurement of the group delay, and associated methods
US7928893B2 (en) 2006-04-12 2011-04-19 William Marsh Rice University Apparatus and method for compressive sensing radar imaging
AU2010200313B2 (en) * 2009-01-30 2015-10-29 Teledyne Uk Limited Apparatus and method for assisting vertical takeoff vehicles
US20110140949A1 (en) * 2009-12-16 2011-06-16 Electronics And Telecommunications Research Institute Mimo radar apparatus and wireless communication method using the same
KR101138292B1 (ko) 2010-05-18 2012-04-24 국방과학연구소 전방관측 3차원 영상 레이더 장치 및 그를 이용한 3차원 영상 획득방법
US20120274499A1 (en) * 2011-04-29 2012-11-01 Spatial Digital Systems Radar imaging via spatial spectrum measurement and MIMO waveforms
US8570210B1 (en) * 2011-06-21 2013-10-29 Lockheed Martin Corporation Aircraft MIMO radar
US9019148B1 (en) * 2012-04-24 2015-04-28 Sandia Corporation Remote sensing using MIMO systems
IL221596A (en) * 2012-08-23 2017-12-31 Beeri Amir METHOD AND DEVICE FOR VOLUME VISUALIZATION IN A WIDE RADAR IMAGING SYSTEM
US9335410B2 (en) * 2013-02-19 2016-05-10 Mitsubishi Electric Research Laboratories, Inc. System and method for multiple spotlight synthetic radar imaging using random beam steering
US20140266868A1 (en) * 2013-03-15 2014-09-18 Src, Inc. Methods And Systems For Multiple Input Multiple Output Synthetic Aperture Radar Ground Moving Target Indicator
US9182483B2 (en) * 2013-03-15 2015-11-10 Mitsubishi Electric Research Laboratories, Inc. Method and system for random steerable SAR using compressive sensing
US9261592B2 (en) * 2014-01-13 2016-02-16 Mitsubishi Electric Research Laboratories, Inc. Method and system for through-the-wall imaging using compressive sensing and MIMO antenna arrays
CN103728618B (zh) * 2014-01-16 2015-12-30 中国科学院电子学研究所 一种高分辨率、宽测绘带的星载sar体制实现方法
CN104267401B (zh) * 2014-10-21 2016-03-02 内蒙古工业大学 线性阵列天线同时mimo-sar成像系统和方法
US9541638B2 (en) * 2014-11-11 2017-01-10 Nxp B.V. MIMO radar system

Also Published As

Publication number Publication date
US9948362B2 (en) 2018-04-17
US20160204840A1 (en) 2016-07-14
JP2016130726A (ja) 2016-07-21

Similar Documents

Publication Publication Date Title
JP6472370B2 (ja) 3次元(3d)シーン画像を生成するシステム及び方法
US9864054B2 (en) System and method for 3D SAR imaging using compressive sensing with multi-platform, multi-baseline and multi-PRF data
JP6456312B2 (ja) 3次元画像を生成する方法及びシステム
JP6132978B2 (ja) 壁背後のシーンを再構成するためのシステム
US7847731B2 (en) Method for the operation of an antenna group having a plurality of transmitters and a plurality of receivers and associated apparatus
Zhu et al. An ISAR imaging method based on MIMO technique
US20160349363A1 (en) Radar Imaging System and Related Techniques
KR20210093967A (ko) 희소 안테나 어레이로부터 형성되는 가상의 어퍼처를 사용한 잠재적으로 움직이는 참조 프레임으로부터의 오브젝트 감지
CN111443339A (zh) 一种双基sar空变校正成像方法、装置、设备及存储介质
JP5787805B2 (ja) 不均一なパルスタイミングを用いた高解像度sar撮像
US20160146932A1 (en) Method and Apparatus for Increasing Angular Resolution in an Automotive Radar System
CN102901964B (zh) 二维多孔径ScanSAR成像方法
JP2016130726A5 (ja)
JP2013174584A (ja) シーン内の反射物を再構成する方法
CN107942295A (zh) 一种前视阵列sar系统的稀疏天线
CN110794399A (zh) 一种主动式毫米波三维成像安检装置
WO2011112313A1 (en) Super-resolution imaging radar
US10877145B2 (en) Method and device for tracking objects, in particular moving objects, in the three-dimensional space of imaging radar sensors
Nuss et al. 3D radar image fusion using OFDM-based MIMO radar
WO2014010000A1 (ja) レーダシステムおよびデータ処理装置
CN108427111B (zh) 一种雷达测距方法及装置
CN110703246B (zh) 一种信号同步装置及系统
Yang et al. Range ambiguity suppression by azimuth phase coding in multichannel SAR systems
CN103869312A (zh) 一种连续场景的稀疏阵列sar侧视三维成像方法
KR102128156B1 (ko) Polar format 프로세싱에 의한 바이스태틱 지대공 레이더 환경에서의 이동 표적 탐지 장치 및 방법

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180921

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180921

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20180921

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20181031

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181113

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181128

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181225

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190122

R150 Certificate of patent or registration of utility model

Ref document number: 6472370

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees