JP2017158929A - 画像処理装置、画像処理装置の作動方法、および画像処理プログラム - Google Patents
画像処理装置、画像処理装置の作動方法、および画像処理プログラム Download PDFInfo
- Publication number
- JP2017158929A JP2017158929A JP2016048077A JP2016048077A JP2017158929A JP 2017158929 A JP2017158929 A JP 2017158929A JP 2016048077 A JP2016048077 A JP 2016048077A JP 2016048077 A JP2016048077 A JP 2016048077A JP 2017158929 A JP2017158929 A JP 2017158929A
- Authority
- JP
- Japan
- Prior art keywords
- color
- color difference
- vector
- image
- amount
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 74
- 238000000034 method Methods 0.000 title claims abstract description 43
- 230000002159 abnormal effect Effects 0.000 claims abstract description 59
- 210000004400 mucous membrane Anatomy 0.000 claims abstract description 30
- 210000002784 stomach Anatomy 0.000 claims abstract description 12
- 239000003086 colorant Substances 0.000 claims description 34
- 238000003384 imaging method Methods 0.000 claims description 23
- 239000008280 blood Substances 0.000 claims description 5
- 210000004369 blood Anatomy 0.000 claims description 5
- 230000003247 decreasing effect Effects 0.000 claims description 4
- 230000031700 light absorption Effects 0.000 claims description 3
- 208000004300 Atrophic Gastritis Diseases 0.000 abstract description 12
- 208000036495 Gastritis atrophic Diseases 0.000 abstract description 12
- 208000016644 chronic atrophic gastritis Diseases 0.000 abstract description 12
- 206010003694 Atrophy Diseases 0.000 abstract description 11
- 230000037444 atrophy Effects 0.000 abstract description 11
- 238000006243 chemical reaction Methods 0.000 description 24
- 235000005811 Viola adunca Nutrition 0.000 description 20
- 235000013487 Viola odorata Nutrition 0.000 description 20
- 235000002254 Viola papilionacea Nutrition 0.000 description 20
- 230000003287 optical effect Effects 0.000 description 20
- 240000009038 Viola odorata Species 0.000 description 18
- 210000004877 mucosa Anatomy 0.000 description 17
- OAICVXFJPJFONN-UHFFFAOYSA-N Phosphorus Chemical compound [P] OAICVXFJPJFONN-UHFFFAOYSA-N 0.000 description 15
- 238000005286 illumination Methods 0.000 description 14
- 230000000875 corresponding effect Effects 0.000 description 12
- 210000004204 blood vessel Anatomy 0.000 description 7
- 238000003780 insertion Methods 0.000 description 7
- 230000037431 insertion Effects 0.000 description 7
- 239000000049 pigment Substances 0.000 description 7
- 238000003745 diagnosis Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 6
- 239000010410 layer Substances 0.000 description 6
- 238000005452 bending Methods 0.000 description 5
- 238000005562 fading Methods 0.000 description 5
- 230000002496 gastric effect Effects 0.000 description 5
- 230000003902 lesion Effects 0.000 description 5
- 208000005718 Stomach Neoplasms Diseases 0.000 description 4
- 244000172533 Viola sororia Species 0.000 description 4
- 230000000740 bleeding effect Effects 0.000 description 4
- 239000012141 concentrate Substances 0.000 description 4
- 230000007423 decrease Effects 0.000 description 4
- 239000006185 dispersion Substances 0.000 description 4
- 206010017758 gastric cancer Diseases 0.000 description 4
- 210000001156 gastric mucosa Anatomy 0.000 description 4
- 239000004065 semiconductor Substances 0.000 description 4
- 201000011549 stomach cancer Diseases 0.000 description 4
- 208000007882 Gastritis Diseases 0.000 description 3
- 230000000295 complement effect Effects 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 210000004907 gland Anatomy 0.000 description 3
- 230000003595 spectral effect Effects 0.000 description 3
- 238000005507 spraying Methods 0.000 description 3
- 102000001554 Hemoglobins Human genes 0.000 description 2
- 108010054147 Hemoglobins Proteins 0.000 description 2
- 244000154870 Viola adunca Species 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 2
- 230000005284 excitation Effects 0.000 description 2
- 210000003195 fascia Anatomy 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000000762 glandular Effects 0.000 description 2
- 230000001678 irradiating effect Effects 0.000 description 2
- 230000001575 pathological effect Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 238000012216 screening Methods 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 238000012323 Endoscopic submucosal dissection Methods 0.000 description 1
- 239000011358 absorbing material Substances 0.000 description 1
- 238000010521 absorption reaction Methods 0.000 description 1
- XAGFODPZIPBFFR-UHFFFAOYSA-N aluminium Chemical compound [Al] XAGFODPZIPBFFR-UHFFFAOYSA-N 0.000 description 1
- 229910052782 aluminium Inorganic materials 0.000 description 1
- 238000000701 chemical imaging Methods 0.000 description 1
- 238000005253 cladding Methods 0.000 description 1
- 238000012326 endoscopic mucosal resection Methods 0.000 description 1
- 238000012277 endoscopic treatment Methods 0.000 description 1
- 238000001839 endoscopy Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000013213 extrapolation Methods 0.000 description 1
- 239000002223 garnet Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 210000004798 organs belonging to the digestive system Anatomy 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 239000011241 protective layer Substances 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 210000004876 tela submucosa Anatomy 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
- 229910052727 yttrium Inorganic materials 0.000 description 1
- VWQVUPCCIRVNHF-UHFFFAOYSA-N yttrium atom Chemical compound [Y] VWQVUPCCIRVNHF-UHFFFAOYSA-N 0.000 description 1
Abstract
【解決手段】 狭帯域画像信号を含む画像信号により構成された内視鏡画像を取得し、輝度を含む色空間において、内視鏡画像の正常部の色を表す基準色Sから内視鏡画像中の各注目画素の色Pまでの色差ベクトルpを取得して、各注目画素の色Pを、色差ベクトルpと同一方向に強調量を加えた色差拡張ベクトルを基準色に加算した色Qに変換する色差拡張処理を施す。色差拡張処理を内視鏡画像の全ての画素に施した正常部と異常部の色差を拡張した内視鏡画像を出力する。
【選択図】図5
Description
12 内視鏡
13 ユニバーサルコード
14 光源装置
16 プロセッサ装置
18 モニタ
20 入力装置
21 挿入部
22 操作部
22a アングルノブ
22b モード切替スイッチ
22c ズーム操作部
23 湾曲部
24 先端部
24a、24c 照明光学系
24b 撮像光学系
34 青色レーザ光源
36 青紫色レーザ光源
40 光源制御部
41 ライトガイド
42a〜42d LED
43 光路結合部
44 蛍光体
45 照明レンズ
46 撮像レンズ
47 ズーミングレンズ
48 撮像センサ
50 CDS・AGC回路
51 ガンマ変換部
52 A/D変換器
54 受信部
56 DSP
58 ノイズ除去部
60 画像処理切替部
62 通常光画像処理部
64 特殊光画像処理部
66 画像表示信号生成部
68 画像取得部
70 色彩強調部
72 構造強調部
74 画像取得部
77 異常領域強調部
78 構造強調部
80 色空間変換部
82 色差ベクトル取得部
84 色差拡張部
86 色空間逆変換部
88 記憶部
Claims (15)
- 狭帯域画像信号を含む画像信号により構成された内視鏡画像を取得する画像取得部と、
輝度を含む色空間において、前記内視鏡画像の正常部の色を表す基準色から前記内視鏡画像中の各注目画素の色までの色差ベクトルを取得する色差ベクトル取得部と、
前記色空間において、前記各注目画素の色を、該注目画素の色差ベクトルと同一方向でありかつ前記色差ベクトルのベクトル量に強調量を加えたベクトル量の色差拡張ベクトルを前記基準色に加算した色に変換する色差拡張処理を施す色差拡張部と、
前記色差拡張処理を前記内視鏡画像の全ての画素に施した前記正常部と異常部の色差を拡張した内視鏡画像を出力する出力部とを備えた画像処理装置。 - 前記色差拡張部は、前記色差ベクトルのベクトル量が第1の閾値より小さい場合は、前記色差ベクトルのベクトル量が大きくなるほど強調量を大きくし、前記色差ベクトルのベクトル量が前記第1の閾値より大きい場合は、前記ベクトル量が大きくなるほど強調量を小さくする請求項1記載の画像処理装置。
- 複数の基準色を予め記憶する記憶部をさらに備え、
前記色差ベクトル取得部は、前記記憶部の前記複数の基準色のうち前記内視鏡画像を代表する代表輝度値に対応して、該代表輝度値が高くなるほど輝度値が高い基準色を用い、該代表輝度値が低くなるほど輝度値が低い基準色を用いて前記色差ベクトルを取得する請求項1または2記載の画像処理装置。 - 前記内視鏡画像の代表輝度値は、前記内視鏡画像の全ての画素の輝度値の平均値である請求項3記載の画像処理装置。
- 前記基準色は、前記内視鏡画像の全ての画素の平均値とする請求項1記載の画像処理装置。
- 前記基準色は、前記内視鏡画像の各素の色成分のうち第2の閾値を越える少なくとも1つ以上の色成分を持つ画素以外の前記内視鏡画像の画素から算出される請求項5記載の画像処理装置。
- 前記色空間は、Ycc色空間、Lab色空間、Luv色空間、HSB色空間、HSL色空間、およびHSV色空間のうちのいずれかである請求項1〜6のいずれか1項記載の画像処理装置。
- 前記狭帯域画像信号は、血液に対する光吸収が他の帯域より多い狭帯域光で照明された検体を撮像して得られる請求項1〜7いずれか1項記載の画像処理装置。
- 前記狭帯域画像信号は、青色帯域の中で血液に対する光吸収が他の帯域より多い青色狭帯域光で照明された検体を撮像して得られる青色狭帯域画像信号、または緑色帯域の中で血液に対する光吸収が他の帯域より多い緑色狭帯域光で照明された検体を撮像して得られる緑色狭帯域画像信号である請求項8記載の画像処理装置。
- 前記内視鏡画像は、胃の内壁を撮影した画像であり前記正常部は正常粘膜であり、前記異常部は異常粘膜である請求項1〜9のいずれか1項記載の画像処理装置。
- 画像取得部と、色差ベクトル取得部と、色差拡張部と、出力部とを備えた画像処理装置の作動方法であって、
前記画像取得部が、狭帯域画像信号を含む画像信号により生成された内視鏡画像を取得する画像取得ステップと、
前記色差ベクトル取得部が、輝度を含む色空間において、狭帯域画像信号を含む画像信号により生成された内視鏡画像の正常部位の色を表す基準色から前記内視鏡画像中の各注目画素の色までの色差ベクトルを取得する色差ベクトル取得ステップと、
前記色差拡張部が、前記色空間において、前記各注目画素の色を、該注目画素の色差ベクトルと同一方向でありかつ前記色差ベクトルのベクトル量に強調量を加えたベクトル量の色差拡張ベクトルを前記基準色に加算した色に変換する色差拡張処理を施す色差拡張ステップと、
前記出力部が、前記色差拡張処理を前記内視鏡画像の全ての画素に施した前記正常部位と異常部位の色差を拡張した内視鏡画像を出力する出力ステップとを備えた画像処理装置の作動方法。 - コンピュータを、
狭帯域画像信号を含む画像信号により生成された内視鏡画像を取得する画像取得部と、
輝度を含む色空間において、前記内視鏡画像の正常部位の色を表す基準色から前記内視鏡画像中の各注目画素の色までの色差ベクトルを取得する色差ベクトル取得部と、
前記色空間において、前記各注目画素の色を、該注目画素の色差ベクトルと同一方向でありかつ前記色差ベクトルのベクトル量に強調量を加えたベクトル量の色差拡張ベクトルを前記基準色に加算した色に変換する色差拡張処理を施す色差拡張部と、
前記色差拡張処理を前記内視鏡画像の全ての画素に施した前記正常部位と異常部位の色差を拡張した内視鏡画像を出力する出力部として機能させるための画像処理プログラム。 - 狭帯域画像信号を含む画像信号により構成された内視鏡画像を取得する画像取得部と、
正常部の色を表す複数の基準色を予め記憶する記憶部と、
前記複数の基準色のうち前記内視鏡画像の輝度値の平均値に対応して、該平均値が高くなるほど輝度値が高い基準色を用い、該平均値が低くなるほど輝度値が低い基準色を用いて、輝度を含む色空間において、該基準色から前記内視鏡画像中の各注目画素の色までの色差ベクトルを取得する色差ベクトル取得部と、
前記色空間において、前記各注目画素の色を、該注目画素の色差ベクトルと同一方向でありかつ前記色差ベクトルのベクトル量に強調量を加えたベクトル量の色差拡張ベクトルを前記基準色に加算した色に変換する色差拡張処理を施す色差拡張部と、
前記色差拡張処理を前記内視鏡画像の全ての画素に施した前記正常部と異常部の色差を拡張した内視鏡画像を出力する出力部とを備え、
前記色差拡張部は、前記色空間における前記異常部の色と前記基準色との距離を第1の閾値として、前記色差ベクトルのベクトル量が前記第1の閾値より小さい場合は、前記色差ベクトルのベクトル量が大きくなるほど強調量を大きくし、前記色差ベクトルのベクトル量が前記第1の閾値より大きい場合は、前記ベクトル量が大きくなるほど強調量を小さくする画像処理装置。 - 画像取得部と、色差ベクトル取得部と、色差拡張部と、出力部と、正常部の色を表す複数の基準色を予め記憶する記憶部とを備えた画像処理装置の作動方法であって、
前記画像取得部が、狭帯域画像信号を含む画像信号により生成された内視鏡画像を取得する画像取得ステップと、
前記色差ベクトル取得部が、前記複数の基準色のうち前記内視鏡画像の輝度値の平均値に対応して、該平均値が高くなるほど輝度値が高い基準色を用い、該平均値が低くなるほど輝度値が低い基準色を用いて、輝度を含む色空間において、該基準色から前記内視鏡画像中の各注目画素の色までの色差ベクトルを取得する色差ベクトル取得ステップと、
前記色差拡張部が、前記色空間において、前記各注目画素の色を、該注目画素の色差ベクトルと同一方向でありかつ前記色差ベクトルのベクトル量に強調量を加えたベクトル量の色差拡張ベクトルを前記基準色に加算した色に変換する色差拡張処理を施す色差拡張ステップと、
前記出力部が、前記色差拡張処理を前記内視鏡画像の全ての画素に施した前記正常部と異常部の色差を拡張した内視鏡画像を出力する出力ステップとを備え、
前記色差拡張ステップは、前記色空間における前記異常部の色と前記基準色との距離を第1の閾値として、前記色差ベクトルのベクトル量が前記第1の閾値より小さい場合は、前記色差ベクトルのベクトル量が大きくなるほど強調量を大きくし、前記色差ベクトルのベクトル量が前記第1の閾値より大きい場合は、前記ベクトル量が大きくなるほど強調量を小さくする画像処理装置の作動方法。 - コンピュータを、
狭帯域画像信号を含む画像信号により構成された内視鏡画像を取得する画像取得部と、
正常部の色を表す複数の基準色を予め記憶する記憶部と、
前記複数の基準色のうち前記内視鏡画像の輝度値の平均値に対応して、該平均値が高くなるほど輝度値が高い基準色を用い、該平均値が低くなるほど輝度値が低い基準色を用いて、輝度を含む色空間において、該基準色から前記内視鏡画像中の各注目画素の色までの色差ベクトルを取得する色差ベクトル取得部と、
前記色空間において、前記各注目画素の色を、該注目画素の色差ベクトルと同一方向でありかつ前記色差ベクトルのベクトル量に強調量を加えたベクトル量の色差拡張ベクトルを前記基準色に加算した色に変換する色差拡張処理を施す色差拡張部と、
前記色差拡張処理を前記内視鏡画像の全ての画素に施した前記正常部と異常部の色差を拡張した内視鏡画像を出力する出力部として機能させるための画像処理プログラムであって、
前記色差拡張部は、前記色空間における前記異常部の色と前記基準色との距離を第1の閾値として、前記色差ベクトルのベクトル量が前記第1の閾値より小さい場合は、前記色差ベクトルのベクトル量が大きくなるほど強調量を大きくし、前記色差ベクトルのベクトル量が前記第1の閾値より大きい場合は、前記ベクトル量が大きくなるほど強調量を小さくする画像処理プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016048077A JP6669539B2 (ja) | 2016-03-11 | 2016-03-11 | 画像処理装置、画像処理装置の作動方法、および画像処理プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016048077A JP6669539B2 (ja) | 2016-03-11 | 2016-03-11 | 画像処理装置、画像処理装置の作動方法、および画像処理プログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020031548A Division JP6855610B2 (ja) | 2020-02-27 | 2020-02-27 | 画像処理装置、画像処理装置の作動方法、および画像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017158929A true JP2017158929A (ja) | 2017-09-14 |
JP6669539B2 JP6669539B2 (ja) | 2020-03-18 |
Family
ID=59853286
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016048077A Active JP6669539B2 (ja) | 2016-03-11 | 2016-03-11 | 画像処理装置、画像処理装置の作動方法、および画像処理プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6669539B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021181706A1 (ja) * | 2020-03-13 | 2021-09-16 | オリンパス株式会社 | 内視鏡装置、プロセッサ、色彩強調方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63149977A (ja) * | 1986-12-12 | 1988-06-22 | Olympus Optical Co Ltd | 色彩強調方式カラ−エンハンス回路 |
JPS63173182A (ja) * | 1987-01-13 | 1988-07-16 | Olympus Optical Co Ltd | 色彩画像処理方式 |
JPH03159391A (ja) * | 1989-11-16 | 1991-07-09 | Olympus Optical Co Ltd | モニタ画像撮影装置 |
JP2006334115A (ja) * | 2005-06-01 | 2006-12-14 | Olympus Medical Systems Corp | 内視鏡診断支援方法、内視鏡診断支援装置および内視鏡診断支援プログラム |
WO2015064435A1 (ja) * | 2013-10-28 | 2015-05-07 | 富士フイルム株式会社 | 画像処理装置及びその作動方法 |
JP2015192839A (ja) * | 2014-03-24 | 2015-11-05 | 富士フイルム株式会社 | 医用画像処理装置及びその作動方法 |
JP2016010506A (ja) * | 2014-06-27 | 2016-01-21 | 富士フイルム株式会社 | 医用画像処理装置及びその作動方法並びに内視鏡システム |
-
2016
- 2016-03-11 JP JP2016048077A patent/JP6669539B2/ja active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63149977A (ja) * | 1986-12-12 | 1988-06-22 | Olympus Optical Co Ltd | 色彩強調方式カラ−エンハンス回路 |
JPS63173182A (ja) * | 1987-01-13 | 1988-07-16 | Olympus Optical Co Ltd | 色彩画像処理方式 |
JPH03159391A (ja) * | 1989-11-16 | 1991-07-09 | Olympus Optical Co Ltd | モニタ画像撮影装置 |
JP2006334115A (ja) * | 2005-06-01 | 2006-12-14 | Olympus Medical Systems Corp | 内視鏡診断支援方法、内視鏡診断支援装置および内視鏡診断支援プログラム |
WO2015064435A1 (ja) * | 2013-10-28 | 2015-05-07 | 富士フイルム株式会社 | 画像処理装置及びその作動方法 |
JP2015192839A (ja) * | 2014-03-24 | 2015-11-05 | 富士フイルム株式会社 | 医用画像処理装置及びその作動方法 |
JP2016010506A (ja) * | 2014-06-27 | 2016-01-21 | 富士フイルム株式会社 | 医用画像処理装置及びその作動方法並びに内視鏡システム |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021181706A1 (ja) * | 2020-03-13 | 2021-09-16 | オリンパス株式会社 | 内視鏡装置、プロセッサ、色彩強調方法 |
US11963668B2 (en) | 2020-03-13 | 2024-04-23 | Olympus Corporation | Endoscope system, processing apparatus, and color enhancement method |
Also Published As
Publication number | Publication date |
---|---|
JP6669539B2 (ja) | 2020-03-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6495539B2 (ja) | 画像処理装置、画像処理装置の作動方法、および画像処理プログラム | |
US9582878B2 (en) | Image processing device and operation method therefor | |
US9545187B2 (en) | Image processing device and method for operating endoscope system | |
JP5789280B2 (ja) | プロセッサ装置、内視鏡システム、及び内視鏡システムの作動方法 | |
US9538902B2 (en) | Image processing device and method for operating endoscope system | |
US9595117B2 (en) | Image processing device and method for operating endoscope system | |
JP6823072B2 (ja) | プロセッサ装置及び内視鏡システム | |
JP2022162028A (ja) | 内視鏡画像処理装置、内視鏡システム、内視鏡画像処理装置の作動方法、内視鏡画像処理プログラム及び記憶媒体 | |
US10003774B2 (en) | Image processing device and method for operating endoscope system | |
JP5972312B2 (ja) | 医用画像処理装置及びその作動方法 | |
JP6669539B2 (ja) | 画像処理装置、画像処理装置の作動方法、および画像処理プログラム | |
JP6243311B2 (ja) | 内視鏡用のプロセッサ装置、内視鏡用のプロセッサ装置の作動方法、内視鏡用の制御プログラム | |
JP6855610B2 (ja) | 画像処理装置、画像処理装置の作動方法、および画像処理プログラム | |
JP2022160298A (ja) | 医用画像処理装置及びその作動方法 | |
JP2017140421A (ja) | 医用画像処理装置及びその作動方法並びに内視鏡システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20170519 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20170908 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20170908 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180219 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20181128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181204 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190108 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190702 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190823 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200128 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200227 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6669539 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |