JP2021524214A - マルチビュービデオのデコードの方法及び装置、並びに画像処理の方法及び装置 - Google Patents
マルチビュービデオのデコードの方法及び装置、並びに画像処理の方法及び装置 Download PDFInfo
- Publication number
- JP2021524214A JP2021524214A JP2021510551A JP2021510551A JP2021524214A JP 2021524214 A JP2021524214 A JP 2021524214A JP 2021510551 A JP2021510551 A JP 2021510551A JP 2021510551 A JP2021510551 A JP 2021510551A JP 2021524214 A JP2021524214 A JP 2021524214A
- Authority
- JP
- Japan
- Prior art keywords
- image
- metadata
- view
- item
- decoding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 64
- 238000003672 processing method Methods 0.000 title abstract description 17
- 238000012545 processing Methods 0.000 claims abstract description 53
- 230000033001 locomotion Effects 0.000 claims description 45
- 239000013598 vector Substances 0.000 claims description 24
- 238000004590 computer program Methods 0.000 claims description 12
- 238000013139 quantization Methods 0.000 claims description 11
- 239000002245 particle Substances 0.000 claims description 8
- 101000746134 Homo sapiens DNA endonuclease RBBP8 Proteins 0.000 claims description 2
- 101000969031 Homo sapiens Nuclear protein 1 Proteins 0.000 claims description 2
- 102100021133 Nuclear protein 1 Human genes 0.000 claims description 2
- 238000010586 diagram Methods 0.000 abstract description 6
- 230000015572 biosynthetic process Effects 0.000 description 32
- 238000003786 synthesis reaction Methods 0.000 description 32
- 230000008569 process Effects 0.000 description 14
- 230000000875 corresponding effect Effects 0.000 description 13
- 238000004422 calculation algorithm Methods 0.000 description 9
- 230000006399 behavior Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 7
- 230000008901 benefit Effects 0.000 description 6
- 238000004364 calculation method Methods 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 230000002194 synthesizing effect Effects 0.000 description 4
- 230000002596 correlated effect Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000003628 erosive effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000004377 microelectronic Methods 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
Description
−カメラパラメータ、
−デコード及びスケーリングされたモーションベクトル、
−再構成された画像の分割、
−再構成されたビューの画像のブロックによって用いられる参照画像、
−再構成されたビューの画像のコード化モード、
−再構成されたビューの画像の量子化パラメータ値、
−再構成されたビューの画像の予測残差値、
−再構成されたビューの画像内の動きを表すマップ、
−再構成されたビューの画像内のオクルージョンの存在を表すマップ、
−深度マップに関連付けられた信頼度値を表すマップ、
を含むグループ内に含まれる情報の1つの項目に対応する。
−デコーダによって再構成されたビューのカメラパラメータ、
−デコーダによって再構成された画像のデコード及びスケーリングされたモーションベクトル、
−再構成された画像の分割、
−再構成された画像のブロックによって用いられる参照画像の表示、
−再構成された画像のコード化モード、
−再構成された画像の量子化パラメータ値、
−再構成された画像の予測残差値。
−再構成されたビューの一画像、又は画像のグループ内の全体モーションを表すマップ。例えば、そのようなマップは、画像、又は画像のグループのモーションベクトルを閾値処理することによって得られるバイナリマップとすることができる。
−再構成されたビューの画像内のオクルージョンの存在を表すマップ。例えば、そのようなマップは、ビュー間予測の場合において各ピクセルの予測残差に含まれる情報のレベルを考慮することによって得られるバイナリマップとすることができ、又は、オクルージョンの可能なロケーションの情報を、画像の視差ベクトル又はエッジマップから導出することができる。
−深度マップに関連付けられた信頼度値を表すマップ。例えば、そのようなマップは、テクスチャのコード化モードと対応する深度のコード化モードとを比較することによってデコーダによって計算することができる。
nb
0〜nb−1の範囲の整数iについて、list[i]
ここで、シンタックス要素nbは、合成モジュールによって必要とされるメタデータの数、ひいては、デコーダによって読み出されるべきインデックスの数を示し、list[i]は、必要とされるメタデータのそれぞれのインデックスを示す。
Claims (14)
- デコード装置によって実施される、マルチビュービデオを表すデータストリームのデコード方法であって、
前記データストリームの少なくとも1つの部分からシンタックス要素を取得すること(E20)と、
取得された前記シンタックス要素から前記ビデオのビューの少なくとも1つの画像を再構成すること(E21)と、
を含み、該デコード方法は、
少なくとも1つのシンタックス要素から、所定の形式でメタデータの少なくとも1つの項目を取得すること(E23)と、
前記メタデータの少なくとも1つの項目を画像合成モジュールに提供すること(E24)と、
を更に含むことを特徴とする、デコード方法。 - メタデータの少なくとも1つの項目を取得することは、前記シンタックス要素の少なくとも1つの部分から前記メタデータの少なくとも1つの項目を計算することを更に含む、請求項1に記載のデコード方法。
- 前記メタデータの少なくとも1つの項目は、前記少なくとも1つの画像を再構成するのに用いられない、請求項1又は2に記載のデコード方法。
- 前記メタデータの少なくとも1つの項目は、以下のもの、すなわち、
カメラパラメータ、
デコード及びスケーリングされたモーションベクトル、
前記再構成された画像の分割、
前記再構成されたビューの画像のブロックによって用いられる参照画像、
前記再構成されたビューの画像のコード化モード、
前記再構成されたビューの画像の量子化パラメータ値、
前記再構成されたビューの画像の予測残差値、
前記再構成されたビューの画像内の動きを表すマップ、
前記再構成されたビューの画像内のオクルージョンの存在を表すマップ、
深度マップに関連付けられた信頼度値を表すマップ、
を含むグループ内に含まれる情報の項目に対応する、請求項1〜3のいずれか1項に記載のデコード方法。 - 前記所定の形式は、メタデータの少なくとも1つの項目がインデックスに関連付けられて記憶される、インデックス付き表に対応する、請求項1〜4のいずれか1項に記載のデコード方法。
- 前記メタデータの少なくとも1つの項目は、前記デコード装置において指定された粒度レベルに基づいて取得される、請求項1〜5のいずれか1項に記載のデコード方法。
- 前記デコード装置によって、前記画像合成モジュールによって必要とされるメタデータの少なくとも1つの項目を示す要求を該画像合成モジュールから受信することを更に含む、請求項1〜6のいずれか1項に記載のデコード方法。
- 前記要求は、利用可能なメタデータの所定のリストの中から前記必要とされるメタデータの項目を示す少なくとも1つのインデックスを含む、請求項7に記載のデコード方法。
- マルチビュービデオを表すデータストリームのデコード装置であって、
該装置は、
前記データストリームの少なくとも1つの部分からシンタックス要素を取得し、
取得された前記シンタックス要素から前記ビデオのビューの少なくとも1つの画像を再構成する、
ように構成され(UT、MEM、COM1)、
該デコード装置は、
少なくとも1つのシンタックス要素から、所定の形式でメタデータの少なくとも1つの項目を取得し、
前記メタデータの少なくとも1つの項目を画像合成モジュールに提供する、
ように更に構成されることを特徴とする、デコード装置。 - デコード装置によってデコードされたビューの少なくとも1つの画像から、仮想ビューの少なくとも1つの画像を生成することを含む画像合成方法であって、該画像合成方法は、
所定の形式でメタデータの少なくとも1つの項目を読み出すこと(E60)であって、前記メタデータの少なくとも1つの項目は、前記デコード装置によって、マルチビュービデオを表すデータストリームから取得された少なくとも1つのシンタックス要素から取得されることと、
前記メタデータの少なくとも1つの読み出された項目を用いることを含む前記少なくとも1つの画像を生成すること(E61)と、
を含むことを特徴とする、画像合成方法。 - 前記デコード装置に、前記画像を生成するのに必要とされるメタデータの少なくとも1つの項目を示す要求を送信することを更に含む、請求項10に記載の画像合成方法。
- デコード装置によってデコードされたビューの少なくとも1つの画像から、仮想ビューの少なくとも1つの画像を生成するように構成された画像合成装置であって、該画像合成装置は、
該画像合成装置が所定の形式でメタデータの少なくとも1つの項目を読み出すように構成され(UT9、MEM9、COM9)、前記メタデータの少なくとも1つの項目は、前記デコード装置によって、マルチビュービデオを表すデータストリームから取得された少なくとも1つのシンタックス要素から取得されること、及び、
前記少なくとも1つの画像が生成されるときに、前記メタデータの少なくとも1つの読み出された項目が用いられること、
を特徴とする、画像合成装置。 - マルチビュービデオを表すデータストリームから該マルチビュービデオを表示する画像処理システムであって、
請求項9に記載のデコード装置と、
請求項12に記載の画像合成装置と、
を備える、画像処理システム。 - プロセッサによって実行されると、請求項1〜8のいずれか1項に記載のデコード方法を実施するか、又は、請求項10又は11に記載の画像合成方法を実施する命令を含むコンピュータプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023179221A JP2024012332A (ja) | 2018-05-03 | 2023-10-18 | マルチビュービデオのデコードの方法及び装置、並びに画像処理の方法及び装置 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR1853829A FR3080968A1 (fr) | 2018-05-03 | 2018-05-03 | Procede et dispositif de decodage d'une video multi-vue, et procede et dispositif de traitement d'images. |
FR1853829 | 2018-05-03 | ||
PCT/FR2019/050892 WO2019211541A2 (fr) | 2018-05-03 | 2019-04-16 | Procédé et dispositif de décodage d'une vidéo multi-vue, et procédé et dispositif de traitement d'images |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023179221A Division JP2024012332A (ja) | 2018-05-03 | 2023-10-18 | マルチビュービデオのデコードの方法及び装置、並びに画像処理の方法及び装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021524214A true JP2021524214A (ja) | 2021-09-09 |
JP7371090B2 JP7371090B2 (ja) | 2023-10-30 |
Family
ID=63407334
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021510551A Active JP7371090B2 (ja) | 2018-05-03 | 2019-04-16 | マルチビュービデオのデコードの方法及び装置、並びに画像処理の方法及び装置 |
JP2023179221A Pending JP2024012332A (ja) | 2018-05-03 | 2023-10-18 | マルチビュービデオのデコードの方法及び装置、並びに画像処理の方法及び装置 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023179221A Pending JP2024012332A (ja) | 2018-05-03 | 2023-10-18 | マルチビュービデオのデコードの方法及び装置、並びに画像処理の方法及び装置 |
Country Status (7)
Country | Link |
---|---|
US (4) | US11290746B2 (ja) |
EP (1) | EP3788789A2 (ja) |
JP (2) | JP7371090B2 (ja) |
KR (1) | KR20210003809A (ja) |
CN (1) | CN112075081A (ja) |
FR (1) | FR3080968A1 (ja) |
WO (1) | WO2019211541A2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021182650A (ja) * | 2018-07-20 | 2021-11-25 | ソニーグループ株式会社 | 画像処理装置および方法 |
GB2586838B (en) * | 2019-09-05 | 2022-07-27 | Sony Interactive Entertainment Inc | Free-viewpoint method and system |
WO2023014576A1 (en) * | 2021-08-03 | 2023-02-09 | Leia Inc. | View synthesis system and method using depth map |
CN115134574B (zh) * | 2022-06-24 | 2023-08-01 | 咪咕视讯科技有限公司 | 动态元数据生成方法、装置、设备及存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140192165A1 (en) * | 2011-08-12 | 2014-07-10 | Telefonaktiebolaget L M Ericsson (Publ) | Signaling of camera and/or depth parameters |
JP2014132721A (ja) * | 2013-01-07 | 2014-07-17 | National Institute Of Information & Communication Technology | 立体映像符号化装置、立体映像復号化装置、立体映像符号化方法、立体映像復号化方法、立体映像符号化プログラム及び立体映像復号化プログラム |
JP2017212592A (ja) * | 2016-05-25 | 2017-11-30 | キヤノン株式会社 | 制御装置、制御方法、及び、プログラム |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2007047736A2 (en) | 2005-10-19 | 2007-04-26 | Thomson Licensing | Multi-view video coding using scalable video coding |
AU2009273297B8 (en) * | 2008-07-21 | 2013-03-07 | Interdigital Madison Patent Holdings | Coding device for 3D video signals |
TWI507183B (zh) | 2009-09-04 | 2015-11-11 | Alcon Inc | 具晶體間混濁化抗性之眼內晶體 |
US8537200B2 (en) * | 2009-10-23 | 2013-09-17 | Qualcomm Incorporated | Depth map generation techniques for conversion of 2D video data to 3D video data |
EP2514210A4 (en) * | 2009-12-17 | 2014-03-19 | Ericsson Telefon Ab L M | METHOD AND DEVICE FOR VIDEO CODING |
US20120269275A1 (en) * | 2010-10-20 | 2012-10-25 | Nokia Corporation | Method and device for video coding and decoding |
US9762903B2 (en) * | 2012-06-01 | 2017-09-12 | Qualcomm Incorporated | External pictures in video coding |
US10452715B2 (en) * | 2012-06-30 | 2019-10-22 | Divx, Llc | Systems and methods for compressing geotagged video |
US9930363B2 (en) * | 2013-04-12 | 2018-03-27 | Nokia Technologies Oy | Harmonized inter-view and view synthesis prediction for 3D video coding |
-
2018
- 2018-05-03 FR FR1853829A patent/FR3080968A1/fr not_active Withdrawn
-
2019
- 2019-04-16 CN CN201980029982.8A patent/CN112075081A/zh active Pending
- 2019-04-16 KR KR1020207032921A patent/KR20210003809A/ko active Search and Examination
- 2019-04-16 WO PCT/FR2019/050892 patent/WO2019211541A2/fr active Application Filing
- 2019-04-16 JP JP2021510551A patent/JP7371090B2/ja active Active
- 2019-04-16 EP EP19727907.8A patent/EP3788789A2/fr active Pending
- 2019-04-16 US US17/052,342 patent/US11290746B2/en active Active
-
2022
- 2022-02-23 US US17/678,364 patent/US11910016B2/en active Active
- 2022-02-23 US US17/678,356 patent/US11910015B2/en active Active
- 2022-02-23 US US17/678,376 patent/US11889115B2/en active Active
-
2023
- 2023-10-18 JP JP2023179221A patent/JP2024012332A/ja active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140192165A1 (en) * | 2011-08-12 | 2014-07-10 | Telefonaktiebolaget L M Ericsson (Publ) | Signaling of camera and/or depth parameters |
JP2014528190A (ja) * | 2011-08-12 | 2014-10-23 | テレフオンアクチーボラゲット エル エム エリクソン(パブル) | カメラおよび/または深度パラメータのシグナリング |
JP2014132721A (ja) * | 2013-01-07 | 2014-07-17 | National Institute Of Information & Communication Technology | 立体映像符号化装置、立体映像復号化装置、立体映像符号化方法、立体映像復号化方法、立体映像符号化プログラム及び立体映像復号化プログラム |
US20150341614A1 (en) * | 2013-01-07 | 2015-11-26 | National Institute Of Information And Communications Technology | Stereoscopic video encoding device, stereoscopic video decoding device, stereoscopic video encoding method, stereoscopic video decoding method, stereoscopic video encoding program, and stereoscopic video decoding program |
JP2017212592A (ja) * | 2016-05-25 | 2017-11-30 | キヤノン株式会社 | 制御装置、制御方法、及び、プログラム |
US20200322584A1 (en) * | 2016-05-25 | 2020-10-08 | Canon Kabushiki Kaisha | Control device, control method, and storage medium |
Also Published As
Publication number | Publication date |
---|---|
WO2019211541A3 (fr) | 2020-01-16 |
US20220182671A1 (en) | 2022-06-09 |
US20210243472A1 (en) | 2021-08-05 |
JP2024012332A (ja) | 2024-01-30 |
US20220182672A1 (en) | 2022-06-09 |
US11889115B2 (en) | 2024-01-30 |
US11910015B2 (en) | 2024-02-20 |
FR3080968A1 (fr) | 2019-11-08 |
WO2019211541A2 (fr) | 2019-11-07 |
US11290746B2 (en) | 2022-03-29 |
CN112075081A (zh) | 2020-12-11 |
KR20210003809A (ko) | 2021-01-12 |
US20220182673A1 (en) | 2022-06-09 |
US11910016B2 (en) | 2024-02-20 |
JP7371090B2 (ja) | 2023-10-30 |
EP3788789A2 (fr) | 2021-03-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Wien et al. | Standardization status of immersive video coding | |
JP7371090B2 (ja) | マルチビュービデオのデコードの方法及び装置、並びに画像処理の方法及び装置 | |
KR101340911B1 (ko) | 다중 뷰들의 효율적인 인코딩 방법 | |
Müller et al. | 3D high-efficiency video coding for multi-view video and depth data | |
US9191646B2 (en) | Apparatus, a method and a computer program for video coding and decoding | |
US10158838B2 (en) | Methods and arrangements for supporting view synthesis | |
US5617334A (en) | Multi-viewpoint digital video coder/decoder and method | |
KR20110088515A (ko) | 가상 뷰 이미지 합성 방법 및 장치 | |
Mieloch et al. | Overview and efficiency of decoder-side depth estimation in MPEG immersive video | |
US20220217400A1 (en) | Method, an apparatus and a computer program product for volumetric video encoding and decoding | |
Lee et al. | Depth-based texture coding in AVC-compatible 3D video coding | |
Ekmekcioglu et al. | A temporal subsampling approach for multiview depth map compression | |
Kukolj et al. | 3D content acquisition and coding | |
US20230065861A1 (en) | Method and device for processing multi-view video data | |
US20230419519A1 (en) | Depth estimation method in an immersive video context | |
Mieloch et al. | A New Approach to Decoder-Side Depth Estimation in Immersive Video Transmission | |
KR20230078669A (ko) | 다시점 비디오의 인코딩 및 디코딩 방법 | |
Milovanovic et al. | Recent advances on 3D video coding technology: HEVC standardization framework | |
Müller et al. | Video Data Processing: Best pictures on all channels | |
CN117561716A (zh) | 用于从多视图视频构建深度图像的方法、用于对表示多视图视频的数据流进行解码的方法、编码方法、设备、系统、终端设备、信号以及与其对应的计算机程序 | |
Morvan et al. | Predictive coding of depth images across multiple views | |
Tsung et al. | Multiview video hybrid coding system with texture-depth synthesis | |
KR20150043164A (ko) | 2d 비디오 기반 3d 비디오 코딩을 위한 병합 움직임 후보 리스트를 구성하는 방법 및 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220331 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230417 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230425 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230725 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230920 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231018 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7371090 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |