JP7418497B2 - 画像キャプチャデバイス部品における経時的な光学的変化の補償 - Google Patents
画像キャプチャデバイス部品における経時的な光学的変化の補償 Download PDFInfo
- Publication number
- JP7418497B2 JP7418497B2 JP2022083204A JP2022083204A JP7418497B2 JP 7418497 B2 JP7418497 B2 JP 7418497B2 JP 2022083204 A JP2022083204 A JP 2022083204A JP 2022083204 A JP2022083204 A JP 2022083204A JP 7418497 B2 JP7418497 B2 JP 7418497B2
- Authority
- JP
- Japan
- Prior art keywords
- time
- model
- image capture
- color
- component
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003287 optical effect Effects 0.000 title claims description 70
- 238000000034 method Methods 0.000 claims description 24
- 230000007613 environmental effect Effects 0.000 claims description 15
- 238000010801 machine learning Methods 0.000 claims description 15
- 230000003595 spectral effect Effects 0.000 claims description 15
- 230000006870 function Effects 0.000 claims description 13
- 238000005259 measurement Methods 0.000 claims description 10
- 230000005855 radiation Effects 0.000 claims description 8
- 230000004044 response Effects 0.000 claims description 8
- 238000002834 transmittance Methods 0.000 claims description 7
- 230000000903 blocking effect Effects 0.000 claims description 4
- 238000000576 coating method Methods 0.000 claims description 4
- 239000011248 coating agent Substances 0.000 claims description 2
- 238000012886 linear function Methods 0.000 claims description 2
- 238000003672 processing method Methods 0.000 claims description 2
- 238000012937 correction Methods 0.000 description 13
- 238000012545 processing Methods 0.000 description 9
- 230000005540 biological transmission Effects 0.000 description 6
- 230000006353 environmental stress Effects 0.000 description 6
- 230000000875 corresponding effect Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000013459 approach Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000000513 principal component analysis Methods 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 206010073306 Exposure to radiation Diseases 0.000 description 1
- HBBGRARXTFLTSG-UHFFFAOYSA-N Lithium ion Chemical compound [Li+] HBBGRARXTFLTSG-UHFFFAOYSA-N 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 229910001416 lithium ion Inorganic materials 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000006641 stabilisation Effects 0.000 description 1
- 238000011105 stabilization Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/85—Camera processing pipelines; Components thereof for processing colour signals for matrixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
- H04N1/40006—Compensating for the effects of ageing, i.e. changes over time
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/56—Processing of colour picture signals
- H04N1/60—Colour correction or control
- H04N1/603—Colour correction or control controlled by characteristics of the picture signal generator or the picture reproducer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Medical Informatics (AREA)
- Data Mining & Analysis (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Spectrometry And Color Measurement (AREA)
- Processing Of Color Television Signals (AREA)
- Color Television Image Signal Generators (AREA)
Description
CAL_DELTA(T)=CAL_DELTA(T0)+0.5*T (式1)
式中、CAL_DELTA(T)は、時間T(年)でカメラモジュールに適用される色較正デルタパーセンテージであり、CAL_DELTA(T0)は、時間T=0年で必要とされる初期の色較正デルタパーセンテージ(工場較正の直後かつ使用の直前に追加の色較正デルタが必要とされないことを想定して、0となる)であり、Tは、カメラ部品の現在の年齢(年)である。言い換えれば、例示的な式1では、カメラ部品が使用される経過年毎に、0.5%の追加の色較正デルタが適用される。
Claims (20)
- メモリと、
1つ以上の画像キャプチャデバイスと、
前記メモリに動作可能に結合された1つ以上のプロセッサと、を備える、デバイスであって、前記1つ以上のプロセッサが、命令を実行するように構成されており、前記命令が、前記1つ以上のプロセッサに、
前記1つ以上の画像キャプチャデバイスのうちの第1の画像キャプチャデバイスの第1の部品に対する時変カラーモデルであって、前記第1の部品における光学的変化を補償するために、前記第1の画像キャプチャデバイスに経時的に適用する色較正の量をモデル化するように構成された時変カラーモデルを取得させ、前記時変カラーモデルは前記第1の部品における光学的変化の量を予測するように訓練された機械学習(ML)モデルを含み、
第1の時間に前記第1の画像キャプチャデバイスによってキャプチャされた第1の画像を取得させ、
前記時変カラーモデル及び前記第1の時間に従って前記第1の画像を色補正させる、デバイス。 - 前記第1の部品が、前記第1の画像キャプチャデバイスの光学部品を含む、請求項1に記載のデバイス。
- 前記光学部品が、レンズ、赤外線(IR)遮断フィルタ、反射防止コーティング又はカラーフィルタ配列(CFA)のうちの少なくとも1つを含む、請求項2に記載のデバイス。
- 前記時変カラーモデルによってモデル化された前記光学的変化が、太陽光放射に対する前記第1の部品の曝露、湿度に対する前記第1の部品の曝露、又は熱に対する前記第1の部品の曝露のうちの1つ以上によって生じている、請求項1に記載のデバイス。
- 前記時変カラーモデルによってモデル化された前記光学的変化が、スペクトル透過率又は総色応答のうちの1つ以上の工場較正値における偏倚を含む、請求項1に記載のデバイス。
- 前記時変カラーモデルによって適用された前記色較正の量が、所定の最大値に制限されている、請求項1に記載のデバイス。
- 前記所定の最大値が、初期の工場較正値からの2%の偏倚を含む、請求項6に記載のデバイス。
- 前記時変カラーモデルによって適用された前記色較正の量が、前記第1の画像キャプチャデバイスの初期の工場較正に続く所定の期間毎に所定の最大値に制限されている、請求項1に記載のデバイス。
- 前記時変カラーモデルが、前記デバイスの1つ以上のセンサからの入力データによって精密化されている、請求項1に記載のデバイス。
- 前記入力データが、前記デバイスの位置、前記デバイスの周囲環境の温度、前記デバイスの周囲環境の湿度レベル、又は前記デバイスの周囲環境の光レベルのうちの1つ以上を含む、請求項9に記載のデバイス。
- 前記時変カラーモデルが、前記デバイスの1つ以上のセンサからの入力データに少なくとも部分的に基づいて、複数の候補時変カラーモデルから取得するために選択されている、請求項1に記載のデバイス。
- 前記時変カラーモデルが、前記デバイス上で実行される1つ以上のアプリケーションからの入力データによって精密化されている、請求項1に記載のデバイス。
- 前記時変カラーモデルが、前記デバイス上で実行される前記1つ以上のアプリケーションからの入力データに少なくとも部分的に基づいて、複数の候補時変カラーモデルから取得するために選択されている、請求項12に記載のデバイス。
- 前記時変カラーモデルが、前記デバイスによって経時的に経験された1つ以上の環境要因と、前記第1の画像キャプチャデバイスの前記第1の部品における対応する光学的変化の量との間の相関関係を学習するように訓練された機械学習(ML)モデルを更に含む、請求項1に記載のデバイス。
- 前記時変カラーモデルが、前記デバイスによって経時的に経験された1つ以上の環境要因と、前記第1の画像キャプチャデバイスの前記第1の部品における対応する光学的変化の量とを相関させるように構成された関数を更に含む、請求項1に記載のデバイス。
- 前記関数が、線形関数、多項式関数、指数関数、又は区分的に定義された関数のうちの少なくとも1つを含む、請求項15に記載のデバイス。
- 前記1つ以上のプロセッサに、前記時変カラーモデル及び前記第1の時間に従って前記第1の画像を色補正させる前記命令が、前記1つ以上のプロセッサに、
前記第1の画像キャプチャデバイスを較正するために使用される色成分測定値を調整させ、又は
前記第1の画像キャプチャデバイスを較正するために使用される色成分測定値の比率を調整させる、命令を更に含む、請求項1に記載のデバイス。 - ディスプレイを更に備え、前記命令が、前記1つ以上のプロセッサに、
前記ディスプレイの第2の部品に対する第2の時変カラーモデルであって、前記第2の部品における光学的変化を補償するために、前記ディスプレイに表示される画像に経時的に適用する色較正の量をモデル化するように構成された第2の時変カラーモデルを取得させ、
第2の時間に前記デバイスの前記ディスプレイに表示するための第2の画像を取得させ、
前記第2の時変カラーモデル及び前記第2の時間に従って前記第2の画像を色補正させ、
前記色補正された第2の画像を前記ディスプレイに表示させる命令を更に含む、請求項1に記載のデバイス。 - 非一時的なコンピュータ読み取り可能な媒体であって、前記媒体が、
電子デバイスの1つ以上の画像キャプチャデバイスのうちの第1の画像キャプチャデバイスの第1の部品に対する時変カラーモデルであって、前記第1の部品における光学的変化を補償するために、前記第1の画像キャプチャデバイスに経時的に適用する色較正の量をモデル化するように構成された時変カラーモデルを取得し、前記時変カラーモデルは前記第1の部品における光学的変化の量を予測するように訓練された機械学習(ML)モデルを含み、
第1の時間に前記第1の画像キャプチャデバイスによってキャプチャされた第1の画像を取得し、
前記時変カラーモデル及び前記第1の時間に従って前記第1の画像を色補正する、1つ以上のプロセッサによって実行可能なコンピュータ読み取り可能な命令を含む、
非一時的なコンピュータ読み取り可能な媒体。 - 画像処理方法であって、
電子デバイスの1つ以上の画像キャプチャデバイスのうちの第1の画像キャプチャデバイスの第1の部品に対する時変カラーモデルであって、前記第1の部品における光学的変化を補償するために、前記第1の画像キャプチャデバイスに経時的に適用する色較正の量をモデル化するように構成された時変カラーモデルを取得することであって、前記時変カラーモデルは前記第1の部品における光学的変化の量を予測するように訓練された機械学習(ML)モデルを含む、ことと、
第1の時間に前記第1の画像キャプチャデバイスによってキャプチャされた第1の画像を取得することと、
前記時変カラーモデル及び前記第1の時間に従って前記第1の画像を色補正することと、
を含む方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202163208814P | 2021-06-09 | 2021-06-09 | |
US63/208,814 | 2021-06-09 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022188753A JP2022188753A (ja) | 2022-12-21 |
JP7418497B2 true JP7418497B2 (ja) | 2024-01-19 |
Family
ID=84192669
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022083204A Active JP7418497B2 (ja) | 2021-06-09 | 2022-05-20 | 画像キャプチャデバイス部品における経時的な光学的変化の補償 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11816866B2 (ja) |
JP (1) | JP7418497B2 (ja) |
KR (1) | KR20220166206A (ja) |
CN (1) | CN115460383B (ja) |
DE (1) | DE102022205639A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116260962B (zh) * | 2023-01-29 | 2024-04-26 | 电信科学技术仪表研究所有限公司 | 一种监控摄像机传感器的耐辐射检测装置及方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009285191A (ja) | 2008-05-29 | 2009-12-10 | Hoya Corp | 内視鏡システム |
JP2011095492A (ja) | 2009-10-29 | 2011-05-12 | Asahi Rubber Inc | ハイブリッドレンズ |
JP2012169917A (ja) | 2011-02-15 | 2012-09-06 | Denso Corp | 画像処理装置及びその調整方法 |
JP2013210564A (ja) | 2012-03-30 | 2013-10-10 | Sharp Corp | 表示装置、ホワイトバランス調整方法、プログラム、および、記録媒体 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11272253A (ja) * | 1998-03-25 | 1999-10-08 | Fuji Photo Film Co Ltd | 画像表示装置 |
JPH11284869A (ja) * | 1998-03-30 | 1999-10-15 | Toyo Ink Mfg Co Ltd | 色補正装置 |
JP2004193707A (ja) * | 2002-12-09 | 2004-07-08 | Minolta Co Ltd | 画像読取装置 |
JP2005012427A (ja) * | 2003-06-18 | 2005-01-13 | Olympus Corp | カメラシステム、カメラ用レンズアダプタ及びカメラシステムのサービス方法 |
JP3944151B2 (ja) | 2003-10-31 | 2007-07-11 | キヤノン株式会社 | 画像処理方法、画像処理装置および画像処理プログラム |
KR100680471B1 (ko) | 2004-11-24 | 2007-02-08 | 매그나칩 반도체 유한회사 | 보색 컬러 필터를 채택한 SoC 카메라 시스템 |
CN102289360A (zh) * | 2011-08-25 | 2011-12-21 | 浙江大学 | 一种自适应投影颜色补偿方法 |
US8704895B2 (en) * | 2011-08-29 | 2014-04-22 | Qualcomm Incorporated | Fast calibration of displays using spectral-based colorimetrically calibrated multicolor camera |
JP2016177195A (ja) | 2015-03-20 | 2016-10-06 | 株式会社リコー | マイクロレンズ基板及び撮像装置 |
JP6988512B2 (ja) | 2018-01-24 | 2022-01-05 | 株式会社リコー | 分光特性取得装置、画像形成装置、画像形成システム |
JP7443201B2 (ja) * | 2020-09-03 | 2024-03-05 | JDI Design and Development 合同会社 | 表示装置及び表示装置の駆動方法 |
KR20220097818A (ko) * | 2020-12-31 | 2022-07-08 | 삼성전자주식회사 | 언더 디스플레이 카메라 |
US11184595B2 (en) * | 2021-03-12 | 2021-11-23 | Google Llc | Color correction using a sensor to reduce color distortions of a camera under a display |
-
2022
- 2022-05-20 JP JP2022083204A patent/JP7418497B2/ja active Active
- 2022-06-02 DE DE102022205639.6A patent/DE102022205639A1/de active Pending
- 2022-06-02 US US17/805,056 patent/US11816866B2/en active Active
- 2022-06-08 CN CN202210642748.6A patent/CN115460383B/zh active Active
- 2022-06-09 KR KR1020220070034A patent/KR20220166206A/ko active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009285191A (ja) | 2008-05-29 | 2009-12-10 | Hoya Corp | 内視鏡システム |
JP2011095492A (ja) | 2009-10-29 | 2011-05-12 | Asahi Rubber Inc | ハイブリッドレンズ |
JP2012169917A (ja) | 2011-02-15 | 2012-09-06 | Denso Corp | 画像処理装置及びその調整方法 |
JP2013210564A (ja) | 2012-03-30 | 2013-10-10 | Sharp Corp | 表示装置、ホワイトバランス調整方法、プログラム、および、記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
JP2022188753A (ja) | 2022-12-21 |
KR20220166206A (ko) | 2022-12-16 |
US11816866B2 (en) | 2023-11-14 |
CN115460383B (zh) | 2024-07-16 |
US20220398779A1 (en) | 2022-12-15 |
CN115460383A (zh) | 2022-12-09 |
DE102022205639A1 (de) | 2022-12-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20160104284A1 (en) | Post-manufacture camera calibration | |
EP2796841B1 (en) | Dynamic compensation of a sensor in a mobile device | |
US20170084250A1 (en) | Methods for Color Sensing Ambient Light Sensor Calibration | |
JP7418497B2 (ja) | 画像キャプチャデバイス部品における経時的な光学的変化の補償 | |
EP2808652A1 (en) | Portable electronic device with integrated temperature sensor being compensated by other sensing data | |
RU2518348C2 (ru) | Устройство и способ для детектирования инфракрасного излучения с помощью матрицы резистивных болометров | |
CN115547270B (zh) | 基于光谱分析的色差调整方法、装置、设备及存储介质 | |
CN111475384B (zh) | 壳体温度的计算方法、装置、存储介质及电子设备 | |
KR20140125306A (ko) | 휴대용 전자 디바이스의 센서 정확성을 결정하기 위한 시스템 및 방법 | |
CN111225155B (zh) | 视频防抖方法、装置、电子设备、计算机设备和存储介质 | |
KR101508746B1 (ko) | 디스플레이의 색 충실도 최적화를 위한 작업 예측을 이용한 방법 및 장치 | |
TWI715142B (zh) | 影像感測裝置以及自動白平衡方法 | |
CN114018416B (zh) | 一种热红外相机辐射定标方法及系统 | |
CN115979419B (zh) | 一种环境光检测方法、装置、设备及存储介质 | |
EP2808651A1 (en) | Portable electronic device with integrated temperature sensor being compensated by other sensing data | |
JP2016133305A (ja) | 赤外線検知装置 | |
CN109084899B (zh) | 一种红外焦平面探测器非均匀性本体输出校正方法及装置 | |
WO2022121901A1 (zh) | 校正控制装置、校正系统和校正控制方法、校正方法 | |
EP3923563A1 (en) | Infrared imaging device and infrared imaging program | |
CN105976746A (zh) | Flicker调节以及装置 | |
CN115790866A (zh) | 基于辐射自校准的火焰温度测量方法、装置、设备及介质 | |
US12069225B2 (en) | Display device and control method for same | |
CN109300449B (zh) | 屏幕色彩校准装置、系统、方法及计算机可读存储介质 | |
TWI782299B (zh) | 使用顯示器後方的感測器判定環境光特性 | |
CN114078168A (zh) | 图像处理模型训练方法、图像处理方法及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220606 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230628 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230703 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231003 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231208 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240109 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7418497 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |