JP2014139543A - 画像処理装置、測定システム、画像処理プログラム - Google Patents

画像処理装置、測定システム、画像処理プログラム Download PDF

Info

Publication number
JP2014139543A
JP2014139543A JP2013008631A JP2013008631A JP2014139543A JP 2014139543 A JP2014139543 A JP 2014139543A JP 2013008631 A JP2013008631 A JP 2013008631A JP 2013008631 A JP2013008631 A JP 2013008631A JP 2014139543 A JP2014139543 A JP 2014139543A
Authority
JP
Japan
Prior art keywords
layer pattern
image
upper layer
mask data
lower layer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013008631A
Other languages
English (en)
Other versions
JP5998068B2 (ja
Inventor
Tatsuya Hachimori
達也 八森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi High Tech Corp
Original Assignee
Hitachi High Technologies Corp
Hitachi High Tech Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi High Technologies Corp, Hitachi High Tech Corp filed Critical Hitachi High Technologies Corp
Priority to JP2013008631A priority Critical patent/JP5998068B2/ja
Publication of JP2014139543A publication Critical patent/JP2014139543A/ja
Application granted granted Critical
Publication of JP5998068B2 publication Critical patent/JP5998068B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Analysing Materials By The Use Of Radiation (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

【課題】試料の上層パターンと下層パターンが混在している観察画像のなかから下層パターンのみを良好に抽出することができる画像処理技術を提供する。
【解決手段】観察画像内において下層パターンのデザインデータを前記上層パターンのデザインデータによってマスク処理したマスクデータを生成し、マスクデータを細線化した細線化マスクデータとマスクデータの輝度を反転して細線化した細線化反転マスクデータを生成し、細線化マスクデータと細線化反転マスクデータを重ね合わせた合成細線化マスクデータを作成する。合成細線化マスクデータ内に含まれる上層パターンに対応する画像パターンを用いて、観察画像内において下層パターンの範囲外に存在する前記上層パターンを除去することにより、観察画像から下層パターンを抽出する。
【選択図】図10

Description

本発明は、画像処理装置に関するものである。
従来、半導体パターンを撮影したSEM画像などの観察画像の中から輪郭線を抽出する技術は、エッジ抽出や輪郭線抽出と呼ばれ、広く用いられている。例えば下記特許文献1には、試料パターンの輪郭線の余剰、重複またはヒゲだけでなく、輪郭線の途切れも解消することのできる技術が開示されている。
特開2011−128070号公報
観察画像のなかには、試料の下層部分、すなわち荷電粒子線を照射する側から見て試料の内層に当たる部分に形成された下層パターンが、試料表面側に形成された上層パターンとともに含まれている場合がある。上記特許文献1に記載されているような従来の画像処理技術においては、上層パターンと下層パターンが混在している観察画像から、下層パターンのみを好適に抽出することは困難であった。
本発明は、上記のような課題に鑑みてなされたものであり、試料の上層パターンと下層パターンが混在している観察画像のなかから下層パターンのみを良好に抽出することができる画像処理技術を提供することを目的とする。
本発明に係る画像処理装置は、観察画像内において下層パターンの範囲外に存在する上層パターンを除去することにより、観察画像から下層パターンを抽出する。
本発明に係る画像処理装置によれば、試料の上層パターンと下層パターンが混在している観察画像のなかから、下層パターンを良好に抽出することができる。
上記した以外の課題、構成、および効果は、以下の実施形態の説明により明らかになるであろう。
測定システム1000の構成図である。 デザインデータベース300が格納している試料の上層パターンのデザインデータ例を示す図である。 デザインデータベース300が格納している試料の下層パターンのデザインデータ例を示す図である。 電子顕微鏡200が取得した試料のSEM画像例を示す図である。 図4のSEM画像から上層パターンの輪郭線を抽出した例を示す図である。 図5に示す上層パターンの輪郭線を太線化した例を示す図である。 下層パターンのデザインデータを上層パターンのデザインデータによってマスク処理した例を示す図である。 図7に示すマスクデータを細線化した例を示す図である。 図7に示すマスクデータの輝度値を反転した例を示す図である。 輝度値を反転したマスクデータを細線化した例を示す図である。 細線化マスクデータと細線化反転マスクデータを合成した例を示す図である。 図4に示すSEM画像に対して、図10に示す合成細線化マスクデータを画像マーカとしてエッジ検出を実施した結果を示す図である。 図11に示すエッジ検出結果を図6に示す太線化した上層パターンの輪郭線によってマスクした例を示す図である。 下層パターンのうち上層パターンによって隠された部分の輪郭線を補間した例を示す図である。 図6のSEM画像をエッジ強調した画像を示す図である。
<システム構成>
図1は、本発明に係る測定システム1000の構成図である。測定システム1000は試料の観察画像を取得するシステムであり、画像処理装置100、電子顕微鏡200、デザインデータベース300を有する。これら機器の間は適当な通信ネットワークによって接続され、互いにデータを送受信することができる。
電子顕微鏡200は、荷電粒子線を測定対象である試料に対して照射することによりその観察画像を取得し、観察画像の画像データを画像処理装置100へ送信する。以下の説明では、試料として半導体基板に形成された上述の上層パターンと下層パターンを取り扱い、電子顕微鏡100はそのSEM画像を取得するものとする。ただし、試料は半導体パターンに限られるものではなく、上層パターンと下層パターンを観察対象とし得る試料であればよい。また、上層パターンと下層パターンの画像はSEM画像に限られるものではなく、同様の画像を取得できればよい。
デザインデータベース300は、試料上に形成する上層パターンと下層パターンのデザインデータを格納するデータベースである。試料上の各パターンは、デザインデータベース300が格納しているデザインデータにしたがって形成されているものと仮定する。
画像処理装置100は、電子顕微鏡200が取得した観察画像を解析して下層パターンを抽出する装置である。画像処理装置100が備える各機能部については後述する。各機能部はその機能を実現する回路デバイスなどのハードウェアを用いて構成することもできるし、その機能を実装したソフトウェアをCPU(Central Processing Unit)などの演算装置が実行することによって構成することもできる。
<試料についての説明>
図2は、デザインデータベース300が格納している試料の上層パターンのデザインデータ例を示す図である。白い(または輝度値が高い)部分は上層パターンが形成されている領域であり、黒い(または輝度値が低い)部分は上層パターン外の背景領域である。
図3は、デザインデータベース300が格納している試料の下層パターンのデザインデータ例を示す図である。デザインデータの白黒については図2に示す上層パターンと同様である。
図4は、電子顕微鏡200が取得した試料のSEM画像例を示す図である。電子顕微鏡200が試料のSEM画像を取得する場合、試料の上層パターンと下層パターンをともに撮影することができるので、図4に示す画像内には上層パターンと下層パターンがともに存在している。画像処理装置100は、以下に説明する動作原理にしたがって、このSEM画像から下層パターンのみを抽出する。
<画像処理装置100の動作原理>
一般に、試料上に形成されたパターンは、観察画像に対してエッジ検出を実施することにより抽出することができる。しかし、図4に示すような上層パターンと下層パターンをともに含むSEM画像に対してそのままエッジ検出を実施すると、両パターンがともに検出されてしまう。そこで画像処理装置100は、以下に説明する考え方にしたがって、上層パターンが形成されている部分のみを回避してエッジ検出を実施することを試みる。
図4に示すSEM画像を全体として観察すると、画像の横方向に下層パターンが延伸しており、その中央部分に縦方向の上層パターンが形成されている。上層パターンと下層パターンが重なり合わない部分、すなわち上層パターンが下層パターンからはみ出している画像上下端部分を除去することができれば、画像全体としては下層パターンが撮影され、下層パターンの一部に上層パターンが重畳されているような画像となる。その後、重畳されている上層パターンを除去することにより、下層パターンのみを抽出することができると考えられる。
具体的には、上層パターンが下層パターンからはみ出している部分にその旨を表示する画像マーカを配置し、当該画像マーカを回避してエッジ検出を実施することにより、下層パターンと上層パターンが重なり合う部分のみを撮影した画像が得られると考えられる。重畳されている上層パターンを除去するためには、例えば元のSEM画像から上層パターンのみを抽出し、これを用いてマスク処理を実施すればよい。
上層パターンが下層パターンからはみ出している部分に配置する画像マーカは、デザインデータを用いて作成することができる。はみ出している部分については、デザインデータの輝度を反転して重ね合わせることにより、画像処理プロセスを用いて識別することができる。具体例については後述する。
<画像処理装置100の動作手順>
以下では、画像処理装置100が図4に示すSEM画像から下層パターンを抽出する処理手順について説明する。
図5は、図4のSEM画像から上層パターンの輪郭線を抽出した例を示す図である。抽出処理部140は、電子顕微鏡200が撮影した観察画像から図5のように上層パターンを抽出した画像を作成する。上層パターンを抽出する手法については公知であるため、ここでは省略する。図5に示す画像は、後述するステップにおいて、下層パターン上に重畳されている上層パターンを除去するために用いるものである。
図6は、図5に示す上層パターンの輪郭線を太線化した例を示す図である。抽出処理部140は、図5に示す上層パターンをそのまま用いることもできるが、下層パターン上に重畳されている上層パターンをより確実に除去するためには、太線化した上層パターンを用いることが望ましい。太線化の手法については公知であるため、ここでは省略する。
図7は、下層パターンのデザインデータを上層パターンのデザインデータによってマスク処理した例を示す図である。マスク処理部110は、デザインデータベース300から取得した上層パターンと下層パターンそれぞれのデザインデータを上記のようにマスク処理し、図7に例示するようなマスクデータを生成する。
図8は、図7に示すマスクデータを細線化した例を示す図である。細線化処理部120は、マスクデータに対して細線化処理を実施することにより、図8に例示するような細線化マスクデータを生成する。ここでいう細線化とは、マスクデータのうち輝度が高い部分(下層パターンが形成されている領域に相当)を細線化することである。細線化処理は、例えば文字の線を細くする処理などを例として一般に知られている技術であるため、具体的な手法については省略する。図7に対して細線化処理を実施することにより、下層パターン部分が狭くなっている。細線化処理を実施する理由については後述する。
図8に示す例においては、最終的に、黒色太字の「T」を上下反転して連結したようなマスクパターンが形成される。黒色部分は、下層パターンを上層パターンによってマスクして形成されたものであるから、SEM画像上で下層パターンが存在していない領域に概ね対応する。ただし太線化によって、ある程度の幅を有する。
図9Aは、図7に示すマスクデータの輝度値を反転した例を示す図である。本データは次の図9Bに示すように細線化される。
図9Bは、輝度値を反転したマスクデータを細線化した例を示す図である。細線化処理部120は、図8に示す細線化マスクデータに加えて、図7に示すマスクデータの輝度値を反転した上で細線化を実施することにより、図9Bに例示するような細線化反転マスクデータを生成する。輝度値を反転した上で細線化を実施しているので、図8とは異なり上層パターンが形成されている領域に細い縦線が配置されている。
図9Bに示す例においては、輝度値が図8から反転しているので、白色(もしくは高輝度色)細字の「T」を上下反転して連結したようなマスクパターンが形成される。白色部分は図8の黒色部分と同様に、下層パターンが存在していない領域に概ね対応する。ただし細線化の過程において、輝度値が高い部分が交差している箇所は、図9Bの上下端に示す三角形領域のように完全に細線化されずに残存する。これは細線化処理において一般的なものである。結果として図9Bに示すマスクデータは、下層パターンが配置されていない領域と上層パターンが重なり合う部分、すなわち上層パターンが下層パターンからはみ出ている部分に、細線化されずに残存した箇所が配置されたものとなる。
図10は、細線化マスクデータと細線化反転マスクデータを合成した例を示す図である。合成処理部130は、図8に示す細線化マスクデータと図9Bに示す細線化反転マスクデータを合成し、図10に例示する合成細線化マスクデータを生成する。この合成細線化マスクデータは、先に説明した画像マーカとして機能する。すなわち抽出処理部140は、SEM画像内の領域のうち、合成細線化マスクデータのなかで輝度値が所定閾値以上である領域に対応する部分(およびその周辺の所定範囲)を画像マーカとみなし、この領域を回避してエッジ検出を実施する。
図10に示す例においては、抽出処理部140は、全体としては図8に示す細線化マスクデータの黒色部分に沿ってエッジ検出を実施する。ただし、上層パターンが下層パターンからはみ出ている部分については、図9Bで説明したように細線化されず残っている箇所に配置された画像マーカにより、これを回避するようにしてエッジ検出を実施する。同様に上層パターンと下層パターンが重なり合っている部分も回避される。その結果、エッジ検出の軌跡は「c」を左右反転して連結したような形状になる。
図11は、図4に示すSEM画像に対して、図10に示す合成細線化マスクデータを画像マーカとしてエッジ検出を実施した結果を示す図である。上層パターンが下層パターンからはみ出ている部分については回避されているものの、下層パターン内に上層パターンが重畳されて残存している。
図12は、図11に示すエッジ検出結果を図6に示す太線化した上層パターンの輪郭線によってマスクした例を示す図である。抽出処理部140は、あらかじめ生成しておいた図6に例示する上層パターンの画像を用いて、下層パターン内に重畳されている上層パターンを除去する。
図13は、下層パターンのうち上層パターンによって隠された部分の輪郭線を補間した例を示す図である。上層パターンは下層パターンよりも上方に配置されているので、下層パターンの一部が上層パターンによって隠される場合がある。このとき、下層パターン内に重畳されている上層パターンを除去すると、一部が途切れた下層パターン画像が得られる。抽出処理部140は、途切れた部分を補間することにより、下層パターンを完全に再現する。補間手法については公知であるため、ここでは言及しない。
図14は、図6のSEM画像をエッジ強調した画像を示す図である。以上の処理過程において、画像処理装置100の各機能部は、SEM画像に対していったんエッジ強調処理を実施した上で各処理を実施してもよい。
<本発明のまとめ>
以上のように、本発明に係る画像処理装置100は、観察画像内において上層パターンが下層パターンからはみ出ている部分を、図7〜図10で説明した画像マーカを用いて除去することにより、観察画像から下層パターンを抽出する。これにより、下層パターンのみを良好に抽出することができる。
また、本発明に係る画像処理装置100は、図8で説明した細線化マスクデータと図9Bで説明した細線化反転マスクデータを、上述の画像マーカとして用いる。これにより、画像処理の範囲内で画像マーカを配置することができるので、既存の画像処理を大きく変更することなく、下層パターンを抽出することができる。
本発明は上記した実施形態に限定されるものではなく、様々な変形例が含まれる。上記実施形態は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、各実施形態の構成の一部について、他の構成を追加・削除・置換することもできる。
100:画像処理装置、110:マスク処理部、120:細線化処理部、130:合成処理部、140:抽出処理部、200:電子顕微鏡、300:デザインデータベース、1000:測定システム。

Claims (7)

  1. 試料の上層部分に形成された上層パターンと前記試料の下層部分に形成された下層パターンをともに撮影した観察画像から前記下層パターンを抽出する画像処理装置であって、
    前記下層パターンのデザインデータを前記上層パターンのデザインデータによってマスク処理したマスクデータを生成するマスク処理部、
    前記マスクデータを細線化した細線化マスクデータと前記マスクデータの輝度を反転して細線化した細線化反転マスクデータを生成する細線化処理部、
    前記細線化マスクデータと前記細線化反転マスクデータを重ね合わせた合成細線化マスクデータを作成する合成処理部、
    前記合成細線化マスクデータ内に含まれる前記上層パターンに対応する画像パターンを用いて、前記観察画像内において前記下層パターンの範囲外に存在する前記上層パターンを除去することにより、前記観察画像から前記下層パターンを抽出する、抽出処理部、
    を備えることを特徴とする画像処理装置。
  2. 前記抽出処理部は、
    前記観察画像内の領域のうち、前記合成細線化マスクデータ内の前記上層パターンに対応する画像パターンを避けてエッジ部分を探索することにより、前記観察画像から前記上層パターンと前記下層パターンが重なり合っている部分の画像パターンを抽出し、
    前記観察画像から前記上層パターンを抜き出した画像パターンによって、前記上層パターンと前記下層パターンが重なり合っている部分の画像パターンをマスクすることにより、前記観察画像から前記上層パターンに対応する画像パターンを除去して前記下層パターンを抽出する
    ことを特徴とする請求項1記載の画像処理装置。
  3. 前記抽出処理部は、
    前記観察画像から前記上層パターンを抜き出した上で太線化した画像パターンによって、前記上層パターンと前記下層パターンが重なり合っている部分の画像パターンをマスクすることにより、前記観察画像から前記上層パターンに対応する画像パターンを除去して前記下層パターンを抽出する
    ことを特徴とする請求項2記載の画像処理装置。
  4. 前記抽出処理部は、
    前記観察画像内の領域のうち、前記合成細線化マスクデータ内の輝度が所定閾値以上の領域に対応する部分を避けることにより、前記上層パターンに対応する画像パターンを避けて前記探索を実施する
    ことを特徴とする請求項2または3記載の画像処理装置。
  5. 前記抽出処理部は、
    前記観察画像から前記上層パターンに対応する画像パターンを除去して前記下層パターンを抽出することにより取得した画像パターンが、前記上層パターンと重なり合うことにより途切れた部分を有する場合は、その部分を補間することにより、連続性を保った前記下層パターンを取得する
    ことを特徴とする請求項2から4のいずれか1項記載の画像処理装置。
  6. 試料に対して荷電粒子線を照射して前記試料の観察画像を生成する電子顕微鏡、
    前記観察画像から前記下層パターンを抽出する請求項1から5のいずれか1項記載の画像処理装置、
    を有することを特徴とする測定システム。
  7. 試料の上層部分に形成された上層パターンと前記試料の下層部分に形成された下層パターンをともに撮影した観察画像から前記下層パターンを抽出する画像処理方法を、コンピュータに実行させるプログラムであって、前記コンピュータに、
    前記下層パターンのデザインデータを前記上層パターンのデザインデータによってマスク処理したマスクデータを生成するマスクステップ、
    前記マスクデータを細線化した細線化マスクデータと前記マスクデータの輝度を反転して細線化した細線化反転マスクデータを生成する細線化ステップ、
    前記細線化マスクデータと前記細線化反転マスクデータを重ね合わせた合成細線化マスクデータを作成する合成ステップ、
    前記合成細線化マスクデータ内に含まれる前記上層パターンに対応する画像パターンを用いて、前記観察画像内において前記下層パターンの範囲外に存在する前記上層パターンを除去することにより、前記観察画像から前記下層パターンを抽出する、抽出ステップ、
    を実行させることを特徴とする画像処理プログラム。
JP2013008631A 2013-01-21 2013-01-21 画像処理装置、測定システム、画像処理プログラム Active JP5998068B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013008631A JP5998068B2 (ja) 2013-01-21 2013-01-21 画像処理装置、測定システム、画像処理プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013008631A JP5998068B2 (ja) 2013-01-21 2013-01-21 画像処理装置、測定システム、画像処理プログラム

Publications (2)

Publication Number Publication Date
JP2014139543A true JP2014139543A (ja) 2014-07-31
JP5998068B2 JP5998068B2 (ja) 2016-09-28

Family

ID=51416311

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013008631A Active JP5998068B2 (ja) 2013-01-21 2013-01-21 画像処理装置、測定システム、画像処理プログラム

Country Status (1)

Country Link
JP (1) JP5998068B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210074995A (ko) 2019-12-12 2021-06-22 주식회사 히타치하이테크 화상 조정 방법 및 하전 입자 빔 시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0720061A (ja) * 1993-06-24 1995-01-24 Nec Corp プリント基板パターン検査装置
JP2000172847A (ja) * 1998-12-08 2000-06-23 Toshiba Corp 微細パターン評価方法及び微細パターン評価プログラムを記録した記録媒体
JP2011033398A (ja) * 2009-07-30 2011-02-17 Hitachi High-Technologies Corp 画像処理方法及び画像処理装置
JP2011128070A (ja) * 2009-12-18 2011-06-30 Hitachi High-Technologies Corp 画像処理装置、及び、測定/検査システム、並びに、プログラム
JP2012177961A (ja) * 2011-02-25 2012-09-13 Hitachi High-Technologies Corp パターンマッチング装置、及びコンピュータープログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0720061A (ja) * 1993-06-24 1995-01-24 Nec Corp プリント基板パターン検査装置
JP2000172847A (ja) * 1998-12-08 2000-06-23 Toshiba Corp 微細パターン評価方法及び微細パターン評価プログラムを記録した記録媒体
JP2011033398A (ja) * 2009-07-30 2011-02-17 Hitachi High-Technologies Corp 画像処理方法及び画像処理装置
JP2011128070A (ja) * 2009-12-18 2011-06-30 Hitachi High-Technologies Corp 画像処理装置、及び、測定/検査システム、並びに、プログラム
JP2012177961A (ja) * 2011-02-25 2012-09-13 Hitachi High-Technologies Corp パターンマッチング装置、及びコンピュータープログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210074995A (ko) 2019-12-12 2021-06-22 주식회사 히타치하이테크 화상 조정 방법 및 하전 입자 빔 시스템
US11276552B2 (en) 2019-12-12 2022-03-15 Hitachi High-Tech Corporation Method for image adjustment and charged particle beam system

Also Published As

Publication number Publication date
JP5998068B2 (ja) 2016-09-28

Similar Documents

Publication Publication Date Title
CN106056562B (zh) 一种人脸图像处理方法、装置及电子设备
US10825142B2 (en) Human face resolution re-establishing method and re-establishing system, and readable medium
CN108022251B (zh) 一种管状结构的中心线的提取方法及系统
US9390511B2 (en) Temporally coherent segmentation of RGBt volumes with aid of noisy or incomplete auxiliary data
JP6007523B2 (ja) 生成装置、生成プログラムおよび生成方法
US20140241645A1 (en) Image processing apparatus, image processing method, and memory device in which image processing program is stored
JP2020102111A (ja) 情報処理装置および外観検査装置
RU2014113387A (ru) Визуализация результатов лечения сосудов
US20180276794A1 (en) Video resolution up-conversion method and device
CN103942756A (zh) 一种深度图后处理滤波的方法
TW200841703A (en) Image processing method and related partial PSF estimation method thereof
JP5998068B2 (ja) 画像処理装置、測定システム、画像処理プログラム
Morard et al. Geodesic attributes thinnings and thickenings
US9734610B2 (en) Image processing device, image processing method, and image processing program
CN107330957A (zh) 一种具有图层之间映射联动关系的图像处理方法
JP2017536903A5 (ja)
CN109509237B (zh) 滤镜处理的方法、装置及电子设备
JP2016121875A (ja) X線検査装置
Liu et al. Multi-focus image fusion using Gaussian filter and dynamic programming
JP7143419B2 (ja) 画像処理装置、画像処理方法、及びプログラム
JP6306952B2 (ja) 中間視点画像生成装置、中間視点画像生成方法及びコンピュータプログラム
JP7010225B2 (ja) 乳房領域検出システム、乳房領域検出方法、及びプログラム
JP2022182149A (ja) 情報処理装置、画像処理方法
Kim et al. Evading Deepfake Detectors via High Quality Face Pre-Processing Methods
JP7370769B2 (ja) 画像処理装置、画像処理方法およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20151019

TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160729

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160809

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160829

R150 Certificate of patent or registration of utility model

Ref document number: 5998068

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350