JP6652514B2 - シェーディング補正装置とその作動方法および作動プログラム - Google Patents
シェーディング補正装置とその作動方法および作動プログラム Download PDFInfo
- Publication number
- JP6652514B2 JP6652514B2 JP2017016556A JP2017016556A JP6652514B2 JP 6652514 B2 JP6652514 B2 JP 6652514B2 JP 2017016556 A JP2017016556 A JP 2017016556A JP 2017016556 A JP2017016556 A JP 2017016556A JP 6652514 B2 JP6652514 B2 JP 6652514B2
- Authority
- JP
- Japan
- Prior art keywords
- correction
- image
- excitation light
- unit
- fluorescence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003705 background correction Methods 0.000 title claims description 61
- 238000000034 method Methods 0.000 title description 20
- 238000012937 correction Methods 0.000 claims description 416
- 230000005284 excitation Effects 0.000 claims description 212
- 238000001514 detection method Methods 0.000 claims description 98
- 239000000126 substance Substances 0.000 claims description 46
- 238000002073 fluorescence micrograph Methods 0.000 claims description 29
- 238000003860 storage Methods 0.000 claims description 28
- 230000001678 irradiating effect Effects 0.000 claims description 14
- 230000003287 optical effect Effects 0.000 description 46
- 238000012545 processing Methods 0.000 description 38
- 238000012423 maintenance Methods 0.000 description 20
- 239000011521 glass Substances 0.000 description 15
- 230000014509 gene expression Effects 0.000 description 14
- 238000004891 communication Methods 0.000 description 13
- 238000005452 bending Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 239000007850 fluorescent dye Substances 0.000 description 9
- 239000000758 substrate Substances 0.000 description 7
- 108091006047 fluorescent proteins Proteins 0.000 description 6
- 102000034287 fluorescent proteins Human genes 0.000 description 6
- 239000000463 material Substances 0.000 description 5
- 108020004414 DNA Proteins 0.000 description 4
- 238000013213 extrapolation Methods 0.000 description 4
- 238000010606 normalization Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 229920005989 resin Polymers 0.000 description 3
- 239000011347 resin Substances 0.000 description 3
- 102000053602 DNA Human genes 0.000 description 2
- 108010043121 Green Fluorescent Proteins Proteins 0.000 description 2
- 102000004144 Green Fluorescent Proteins Human genes 0.000 description 2
- 230000004308 accommodation Effects 0.000 description 2
- JNDMLEXHDPKVFC-UHFFFAOYSA-N aluminum;oxygen(2-);yttrium(3+) Chemical compound [O-2].[O-2].[O-2].[Al+3].[Y+3] JNDMLEXHDPKVFC-UHFFFAOYSA-N 0.000 description 2
- 239000011230 binding agent Substances 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 239000005090 green fluorescent protein Substances 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 108090000623 proteins and genes Proteins 0.000 description 2
- 102000004169 proteins and genes Human genes 0.000 description 2
- 108010054624 red fluorescent protein Proteins 0.000 description 2
- 229920002477 rna polymer Polymers 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 108091005957 yellow fluorescent proteins Proteins 0.000 description 2
- 229910019901 yttrium aluminum garnet Inorganic materials 0.000 description 2
- 108091032973 (ribonucleotides)n+m Proteins 0.000 description 1
- 229930091051 Arenine Natural products 0.000 description 1
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 229910052684 Cerium Inorganic materials 0.000 description 1
- OAICVXFJPJFONN-UHFFFAOYSA-N Phosphorus Chemical compound [P] OAICVXFJPJFONN-UHFFFAOYSA-N 0.000 description 1
- RTAQQCXQSZGOHL-UHFFFAOYSA-N Titanium Chemical compound [Ti] RTAQQCXQSZGOHL-UHFFFAOYSA-N 0.000 description 1
- BZHJMEDXRYGGRV-UHFFFAOYSA-N Vinyl chloride Chemical compound ClC=C BZHJMEDXRYGGRV-UHFFFAOYSA-N 0.000 description 1
- 239000000853 adhesive Substances 0.000 description 1
- 230000001070 adhesive effect Effects 0.000 description 1
- 239000000956 alloy Substances 0.000 description 1
- 229910045601 alloy Inorganic materials 0.000 description 1
- 229910052782 aluminium Inorganic materials 0.000 description 1
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 1
- 239000001000 anthraquinone dye Substances 0.000 description 1
- 229910052799 carbon Inorganic materials 0.000 description 1
- 239000000919 ceramic Substances 0.000 description 1
- -1 cerium-activated YAG Chemical class 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000000295 emission spectrum Methods 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 229910052751 metal Inorganic materials 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 150000002739 metals Chemical class 0.000 description 1
- 239000000113 methacrylic resin Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000001007 phthalocyanine dye Substances 0.000 description 1
- 229920002401 polyacrylamide Polymers 0.000 description 1
- 229920005668 polycarbonate resin Polymers 0.000 description 1
- 239000004431 polycarbonate resin Substances 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 229920002050 silicone resin Polymers 0.000 description 1
- 239000010935 stainless steel Substances 0.000 description 1
- 229910001220 stainless steel Inorganic materials 0.000 description 1
- 229910052719 titanium Inorganic materials 0.000 description 1
- 239000010936 titanium Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
- H04N25/615—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4" involving a transfer function modelling the optical system, e.g. optical transfer function [OTF], phase transfer function [PhTF] or modulation transfer function [MTF]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
- H04N1/401—Compensating positionally unequal response of the pick-up or reproducing head
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
- H04N1/407—Control or modification of tonal gradation or of extreme levels, e.g. background level
- H04N1/4076—Control or modification of tonal gradation or of extreme levels, e.g. background level dependent on references outside the picture
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Facsimile Scanning Arrangements (AREA)
- Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
- Image Input (AREA)
- Facsimile Image Signal Circuits (AREA)
Description
図1において、画像検出システム10は、画像読取装置11と、後述する補正板65(図5参照)とともにシェーディング補正装置を構成するコンソール12とを備えている。画像読取装置11とコンソール12は、例えばUSB(Universal Serial Bus)規格の通信ケーブルで接続されており、相互にデータを遣り取りすることが可能である。
FF/FV=FFS・・・(1)
FF(MN)/FV(MN)=FFS(MN)・・・(2)
こうして生成された規格化補正用画像信号FFSは、複数枚の補正板65の蛍光特性のばらつきが補正されたものである。
FC=(FR−FD)/(FFF−FD)・・・(3)
なお、ダークノイズや画像信号のオフセットが無視できる程度に小さい場合は、下記式(4)を用いてシェーディングの補正を行ってもよい。
FC=FR/FFF・・・(4)
上記第1実施形態では、小領域SRの個数と同数枚の補正板65を用意し、小領域SRに補正板65を各々配置した状態で励起光を照射して補正用画像信号FFを得ているが、本発明はこれに限定されない。図16〜図18に示す第2実施形態のように、小領域SRの個数よりも少ない枚数の補正板を初期位置から1回以上移動させて、初期位置と移動させた位置においてそれぞれ励起光を照射して補正用画像信号FFを得てもよい。
上記各実施形態では、小領域SRと同じ平面サイズを有する補正板を例示したが、図19に示す第3実施形態のように、小領域SRよりも小さい平面サイズの補正板115を用いてもよい。図19において、補正板115は、小領域SRのおよそ1/4程度の平面サイズを有し、かつ正方形状である。このように、小領域SRに対応する平面サイズとは、小領域SRと同じ平面サイズに限定されるものではなく、小領域SRに収まる平面サイズも含まれる。また、小領域SRの長方形状に対して補正板105を正方形状としたように、小領域SRと補正板は同形状である必要はない。
画像検出領域において、画像情報を担持した蛍光物質を含む画像担体に励起光を照射する励起光源と、前記励起光により励起された前記蛍光物質からの蛍光に基づいて蛍光画像を検出する検出部とを備えた画像読取装置に用いられ、前記検出部が検出した前記蛍光画像に生じる濃度ムラであるシェーディングを補正するシェーディング補正装置において、
前記蛍光物質の励起波長および発光波長のそれぞれの波長帯域の少なくとも一部と励起波長および発光波長のそれぞれの波長帯域が重なる波長特性を有する平板状の補正板であって、前記画像検出領域内の複数の小領域に対応する平面サイズを有する補正板を、前記画像検出領域において対応する前記小領域に配置した状態で前記検出部が検出した補正用画像信号を取得する取得プロセッサと、
前記画像検出領域内の前記小領域毎の前記補正用画像信号を元に補正用画像を作成する作成プロセッサと、
前記補正用画像に基づいて、前記蛍光画像に対してシェーディングの補正を行う補正プロセッサとを備えるシェーディング補正装置。
11 画像読取装置
12 コンソール(シェーディング補正装置)
13 画像担体
14 筐体
15、16 蓋
17 ディスプレイ
18 操作部
25 ステージ
25A 底面
25B 側面
25C マーク
26 励起光源
26A 励起光源(赤外励起光源)
26B 励起光源(赤色励起光源)
26C 励起光源(緑色励起光源)
26D 励起光源(青色励起光源)
27 光源光学系
28 導光光学系
29、130 光学ヘッド
30 フィルタユニット
31 フォトマルチプライア(検出部)
32 ガラス板
33 画像検出領域
34〜37 コリメータレンズ
38、42、43、134 ミラー
39〜41、133 ダイクロイックミラー
44 穴開き凹面ミラー
45、50 凹面ミラー
46 貫通孔
47 基板
48 フィルタ
48A フィルタ(赤外フィルタ)
48B フィルタ(赤色フィルタ)
48C フィルタ(緑色フィルタ)
48D フィルタ(青色フィルタ)
48E フィルタ
51 非球面レンズ
55 A/D変換器(A/D)
56 画像メモリ
57 通信部
58 スキャン部
59 コントローラ
65、105、115 補正板
65A〜65C 第1〜第3補正板
66、110、120 保持枠
67、67A〜67C、111 補正板ユニット
68、112 凹部
69 マーク
75 ストレージデバイス
76 メモリ
77 CPU
78 通信部
79 データバス
85 作動プログラム
86 蛍光特性値情報
86A〜86C 第1〜第3蛍光特性値情報
87 補正用画像
87A〜87D 第1〜第4補正用画像
90 取得部
91 指示受付部
92 情報管理部
93 画像処理部
94 設定部
95 表示制御部
96 作成部
97 補正部
106 嵌合突起
113 嵌合穴
121 収容穴
122 段差
131 対物レンズ
132 集光レンズ
135A、135B 第1、第2アバランシェフォトダイオード(APD)
FF 補正用画像信号
FFS 規格化補正用画像信号
FFF 補正用画像の画像信号
FR 蛍光画像の画像信号
FC 補正済み蛍光画像の画像信号
FV 特性値
SR 小領域
X 主走査方向
Y 副走査方向
EL 励起光
EL−IR 赤外励起光
EL−R 赤色励起光
FL 蛍光
FL−IR 赤外蛍光
FL−R 赤色蛍光
S100〜S150、S200〜S250 ステップ
Claims (12)
- 画像検出領域において、画像情報を担持した蛍光物質を含む画像担体に励起光を照射する励起光源と、前記励起光により励起された前記蛍光物質からの蛍光に基づいて蛍光画像を検出する検出部とを備えた画像読取装置に用いられ、前記検出部が検出した前記蛍光画像に生じる濃度ムラであるシェーディングを補正するシェーディング補正装置において、
前記蛍光物質の励起波長および発光波長のそれぞれの波長帯域の少なくとも一部と励起波長および発光波長のそれぞれの波長帯域が重なる波長特性を有する平板状の補正板であって、前記画像検出領域内の複数の小領域に対応する平面サイズを有する補正板と、
前記画像検出領域において前記補正板を対応する前記小領域に配置した状態で前記検出部が検出した補正用画像信号を取得する取得部と、
前記小領域に前記補正板を各々配置した状態で前記励起光を照射して得られる前記小領域毎の前記補正用画像信号を元に補正用画像を作成する作成部と、
前記補正用画像に基づいて、前記蛍光画像に対してシェーディングの補正を行う補正部とを備えるシェーディング補正装置。 - 前記小領域は、前記画像検出領域を等分した領域である請求項1に記載のシェーディング補正装置。
- 前記補正板が複数枚ある場合、複数枚の前記補正板の蛍光の特性値を予め記憶部に記憶しておき、
前記作成部は、前記小領域毎の前記補正用画像信号を、該当する前記補正板の前記特性値で除算して、複数枚の前記補正板の蛍光特性のばらつきを補正したうえで前記補正用画像を作成する請求項1または2に記載のシェーディング補正装置。 - 前記作成部は、前記小領域毎の前記補正用画像信号で内挿、または外挿して前記補正用画像を作成する請求項1ないし3のいずれか1項に記載のシェーディング補正装置。
- 前記作成部は、前記シェーディングの補正を行う前に前記補正用画像を作成して記憶部に記憶させておき、
前記補正部は、前記シェーディングの補正を行う場合に前記記憶部から前記補正用画像を読み出す請求項1ないし4のいずれか1項に記載のシェーディング補正装置。 - 前記補正板は前記小領域と同じ平面サイズを有し、前記画像検出領域に敷き詰められる請求項1ないし5のいずれか1項に記載のシェーディング補正装置。
- 前記補正板は前記小領域よりも小さい平面サイズを有する請求項1ないし6のいずれか1項に記載のシェーディング補正装置。
- 前記補正板を保持し、前記画像検出領域に設置される保持枠を備える請求項1ないし7のいずれか1項に記載のシェーディング補正装置。
- 前記補正板は、上下左右と表裏の向きを示す指標を有する請求項1ないし8のいずれか1項に記載のシェーディング補正装置。
- 前記小領域は、9カ所以上である請求項1ないし9のいずれか1項に記載のシェーディング補正装置。
- 画像検出領域において、画像情報を担持した蛍光物質を含む画像担体に励起光を照射する励起光源と、前記励起光により励起された前記蛍光物質からの蛍光に基づいて蛍光画像を検出する検出部とを備えた画像読取装置に用いられ、前記検出部が検出した前記蛍光画像に生じる濃度ムラであるシェーディングを補正するシェーディング補正装置の作動方法において、
前記蛍光物質の励起波長および発光波長のそれぞれの波長帯域の少なくとも一部と励起波長および発光波長のそれぞれの波長帯域が重なる波長特性を有する平板状の補正板であって、前記画像検出領域内の複数の小領域に対応する平面サイズを有する補正板を、前記画像検出領域において対応する前記小領域に配置した状態で前記検出部が検出した補正用画像信号を取得する取得ステップと、
前記小領域に前記補正板を各々配置した状態で前記励起光を照射して得られる前記小領域毎の前記補正用画像信号を元に補正用画像を作成する作成ステップと、
前記補正用画像に基づいて、前記蛍光画像に対してシェーディングの補正を行う補正ステップとを備えるシェーディング補正装置の作動方法。 - 画像検出領域において、画像情報を担持した蛍光物質を含む画像担体に励起光を照射する励起光源と、前記励起光により励起された前記蛍光物質からの蛍光に基づいて蛍光画像を検出する検出部とを備えた画像読取装置に用いられ、前記検出部が検出した前記蛍光画像に生じる濃度ムラであるシェーディングを補正するシェーディング補正装置の作動プログラムにおいて、
前記蛍光物質の励起波長および発光波長のそれぞれの波長帯域の少なくとも一部と励起波長および発光波長のそれぞれの波長帯域が重なる波長特性を有する平板状の補正板であって、前記画像検出領域内の複数の小領域に対応する平面サイズを有する補正板を、前記画像検出領域において対応する前記小領域に配置した状態で前記検出部が検出した補正用画像信号を取得する取得機能と、
前記小領域に前記補正板を各々配置した状態で前記励起光を照射して得られる前記小領域毎の前記補正用画像信号を元に補正用画像を作成する作成機能と、
前記補正用画像に基づいて、前記蛍光画像に対してシェーディングの補正を行う補正機能とを、コンピュータに実行させるシェーディング補正装置の作動プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017016556A JP6652514B2 (ja) | 2017-02-01 | 2017-02-01 | シェーディング補正装置とその作動方法および作動プログラム |
US15/884,900 US10516837B2 (en) | 2017-02-01 | 2018-01-31 | Shading correction apparatus and method for operating shading correction apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017016556A JP6652514B2 (ja) | 2017-02-01 | 2017-02-01 | シェーディング補正装置とその作動方法および作動プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018125711A JP2018125711A (ja) | 2018-08-09 |
JP6652514B2 true JP6652514B2 (ja) | 2020-02-26 |
Family
ID=62980923
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017016556A Active JP6652514B2 (ja) | 2017-02-01 | 2017-02-01 | シェーディング補正装置とその作動方法および作動プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US10516837B2 (ja) |
JP (1) | JP6652514B2 (ja) |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09331451A (ja) * | 1996-06-11 | 1997-12-22 | Mita Ind Co Ltd | 画像読取装置 |
JP3585753B2 (ja) | 1998-12-15 | 2004-11-04 | 富士写真フイルム株式会社 | 撮影システム |
JP4110715B2 (ja) * | 2000-07-11 | 2008-07-02 | コニカミノルタビジネステクノロジーズ株式会社 | 画像処理装置 |
JP2003315944A (ja) * | 2002-04-26 | 2003-11-06 | Fuji Photo Film Co Ltd | 画像読取装置 |
JP2005354357A (ja) * | 2004-06-10 | 2005-12-22 | Fuji Photo Film Co Ltd | 画像データ補正方法および装置ならびにプログラム |
JP6553559B2 (ja) * | 2016-08-24 | 2019-07-31 | 富士フイルム株式会社 | シェーディング補正装置とその作動方法および作動プログラム |
-
2017
- 2017-02-01 JP JP2017016556A patent/JP6652514B2/ja active Active
-
2018
- 2018-01-31 US US15/884,900 patent/US10516837B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20180220087A1 (en) | 2018-08-02 |
US10516837B2 (en) | 2019-12-24 |
JP2018125711A (ja) | 2018-08-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3287984B1 (en) | Shading correction apparatus and method for operating shading correction apparatus | |
EP2701194B1 (en) | Method and apparatus for imaging a microfluidic device under temperature control | |
USRE36826E (en) | Electrophoresis pattern reading system of fluorescence type | |
EP0767373A2 (en) | Apparatus for scanning of luminescent samples | |
JP2814409B2 (ja) | 多色泳動パターン読み取り装置 | |
US11300513B2 (en) | Device for reading an IVD assay | |
CA2732167C (en) | Encoding method for encoding medical items | |
JP6652514B2 (ja) | シェーディング補正装置とその作動方法および作動プログラム | |
Miura | Imaging technologies for the detection of multiple stains in proteomics | |
JP3667947B2 (ja) | 蛍光画像読み取り装置 | |
US6996289B1 (en) | Image processing apparatus and method which defines abnormal pixels by reading density signal levels | |
US11150188B2 (en) | Control device of image reading apparatus, operation method thereof, and image detection system | |
US6493459B2 (en) | Image reading apparatus | |
JP2002156714A (ja) | 画像生成方法および画像生成装置 | |
US7576774B2 (en) | Photography control apparatus and program | |
JPH1175087A (ja) | 画像処理装置 | |
JP2001083091A (ja) | 画像読み取り装置 | |
JPH10210408A (ja) | 画像生成装置 | |
JP2004126651A (ja) | 画像処理条件表示方法および装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190212 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191031 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191112 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191223 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200121 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200123 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6652514 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |