JPWO2017208818A1 - 送信装置、送信方法、受信装置および受信方法 - Google Patents
送信装置、送信方法、受信装置および受信方法 Download PDFInfo
- Publication number
- JPWO2017208818A1 JPWO2017208818A1 JP2018520780A JP2018520780A JPWO2017208818A1 JP WO2017208818 A1 JPWO2017208818 A1 JP WO2017208818A1 JP 2018520780 A JP2018520780 A JP 2018520780A JP 2018520780 A JP2018520780 A JP 2018520780A JP WO2017208818 A1 JPWO2017208818 A1 JP WO2017208818A1
- Authority
- JP
- Japan
- Prior art keywords
- subtitle
- information
- stream
- streams
- predetermined number
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 44
- 238000000034 method Methods 0.000 title claims description 10
- 238000000605 extraction Methods 0.000 claims description 34
- 238000003780 insertion Methods 0.000 claims description 4
- 230000037431 insertion Effects 0.000 claims description 4
- 230000032258 transport Effects 0.000 description 42
- 238000004458 analytical method Methods 0.000 description 25
- 239000000284 extract Substances 0.000 description 15
- 208000032041 Hearing impaired Diseases 0.000 description 13
- 206010048865 Hypoacusis Diseases 0.000 description 13
- 238000005516 engineering process Methods 0.000 description 13
- 238000006243 chemical reaction Methods 0.000 description 10
- 206010011878 Deafness Diseases 0.000 description 6
- 238000004891 communication Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 101100190462 Caenorhabditis elegans pid-1 gene Proteins 0.000 description 2
- 101100190464 Caenorhabditis elegans pid-2 gene Proteins 0.000 description 2
- 230000003321 amplification Effects 0.000 description 2
- 239000003550 marker Substances 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 101100190466 Caenorhabditis elegans pid-3 gene Proteins 0.000 description 1
- 230000002730 additional effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
- H04H20/28—Arrangements for simultaneous broadcast of plural pieces of information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
- H04H60/68—Systems specially adapted for using specific information, e.g. geographical or meteorological information
- H04H60/73—Systems specially adapted for using specific information, e.g. geographical or meteorological information using meta-information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
- H04H60/35—Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
- H04H60/61—Arrangements for services using the result of monitoring, identification or recognition covered by groups H04H60/29-H04H60/54
- H04H60/65—Arrangements for services using the result of monitoring, identification or recognition covered by groups H04H60/29-H04H60/54 for using the result on users' side
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
- H04H60/68—Systems specially adapted for using specific information, e.g. geographical or meteorological information
- H04H60/73—Systems specially adapted for using specific information, e.g. geographical or meteorological information using meta-information
- H04H60/74—Systems specially adapted for using specific information, e.g. geographical or meteorological information using meta-information using programme related information, e.g. title, composer or interpreter
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Television Systems (AREA)
Abstract
それぞれ1つまたは2つ以上のサブタイトル情報を持つ所定数のサブタイトルストリームを生成し、それを含む所定フォーマットのコンテナを送信する。受信側では、所定数のサブタイトルストリームから1つのサブタイトルストリームを抽出し、この1つのサブタイトルストリームから1つのサブタイトル情報を抽出し、この1つのサブタイトル情報をデコードしてサブタイトル表示を制御する。
Description
それぞれ1つまたは2つ以上のサブタイトル情報を持つ所定数のサブタイトルストリームを生成するサブタイトルエンコード部と、
上記所定数のサブタイトルストリームを含む所定フォーマットのコンテナを送信する送信部を備える
送信装置にある。
それぞれ一つまたは2つ以上のサブタイトル情報を持つ所定数のサブタイトルストリームを含む所定フォーマットのコンテナを受信する受信部と、
上記所定数のサブタイトルストリームから1つのサブタイトルストリームを抽出する第1の抽出処理と、該抽出された1つのサブタイトルストリームから1つのサブタイトル情報を抽出する第2の抽出処理を制御する制御部を備える
受信装置にある。
1.実施の形態
2.変形例
[送受信システムの構成例]
図1は、実施の形態としての送受信システム10の構成例を示している。この送受信システム10は、放送送出システム100とテレビ受信機200により構成されている。放送送出システム100は、コンテナ(多重化ストリーム)としてのMPEG−2 TSのトランスポートストリーム(以下、単に、「トランスポートストリームTS」という)を、放送波に載せて送信する。
図5は、放送送出システム100のストリーム生成部110の構成例を示している。このストリーム生成部110は、制御部111と、ビデオエンコーダ112と、オーディオエンコーダ113と、テキストフォーマット変換部114と、サブタイトルエンコーダ115と、TSフォーマッタ(マルチプレクサ)116を有している。
図16は、トランスポートストリームTSの構成例を示している。この構成例では、ビデオ、オーディオの部分についての構成は省略している。この構成例では、PID1で識別されるサブタイトルストリーム1のPESパケットであるサブタイトル1・PESパケット「Subtitle1 PES」が存在すると共に、PID2で識別されるサブタイトルストリーム2のPESパケットであるサブタイトル2・PESパケット「Subtitle2 PES」が存在する。
図17は、テレビ受信機200の構成例を示している。このテレビ受信機200は、受信部201と、TS解析部(デマルチプレクサ)202と、ビデオデコーダ203と、ビデオ重畳部204と、パネル駆動回路205と、モニタ(ディスプレイ)としての表示パネル206を有している。また、このテレビ受信機200は、オーディオデコーダ207と、オーディオ出力回路208と、スピーカ209と、サブタイトルデコーダ210を有している。また、このテレビ受信機200は、CPU221と、フラッシュROM222と、DRAM223と、内部バス224と、リモコン受信部225と、リモコン送信機226と、通信インタフェース227を有している。
なお、上述実施の形態においては、放送送出システム100で生成されるトランスポートストリームTSに、言語が「英語」で、内容がそれぞれ「一般」、「聴覚障害者向け」、「非ネイティブ向け」である3つのサブタイトル情報(TTMLセグメント)を持つサブタイトルストリーム1(Packet id1)と、言語が「フランス語」で、内容がそれぞれ「一般」、「聴覚障害者向け」、「非ネイティブ向け」である3つのサブタイトル情報(TTMLセグメント)を持つサブタイトルストリーム2(Packet id2)が含まれる例を示した。
(1)それぞれ1つまたは2つ以上のサブタイトル情報を持つ所定数のサブタイトルストリームを生成するサブタイトルエンコード部と、
上記所定数のサブタイトルストリームを含む所定フォーマットのコンテナを送信する送信部を備える
送信装置。
(2)上記所定数のサブタイトルストリームは、それぞれ、セグメント化されたサブタイトル情報を持つ
前記(1)に記載の送信装置。
(3)上記サブタイトルエンコード部は、それぞれ言語の異なるサブタイトル情報を持つ複数のサブタイトルストリームを生成し、
上記複数のサブタイトルストリームは、それぞれ、内容の異なる複数のサブタイトル情報を持つ
前記(1)または(2)に記載の送信装置。
(4)上記サブタイトルエンコード部は、それぞれ内容の異なるサブタイトル情報を持つ複数のサブタイトルストリームを生成し、
上記複数のサブタイトルストリームは、それぞれ、言語の異なる複数のサブタイトル情報を持つ
前記(1)または(2)に記載の送信装置。
(5)上記コンテナに、上記所定数のサブタイトルストリームのそれぞれに関する情報を挿入する情報挿入部をさらに備える
前記(1)から(4)のいずれかに記載の送信装置。
(6)上記サブタイトルストリームのそれぞれに関する情報には、対応するサブタイトルストリームが複数のサブタイトル情報を持つか否かを示すフラグ情報が含まれる
前記(5)に記載の送信装置。
(7)上記サブタイトルストリームのそれぞれに関する情報には、対応するサブタイトルストリームを識別する識別情報が含まれる
前記(5)または(6)に記載の送信装置。
(8)上記サブタイトルストリームのそれぞれに関する情報には、対応するサブタイトルストリームが持つ各サブタイトル情報を識別する識別情報が含まれる
前記(5)から(7)のいずれかに記載の送信装置。
(9)それぞれ1つまたは2つ以上のサブタイトル情報を持つ所定数のサブタイトルストリームを生成するサブタイトルエンコードステップと、
送信部により、上記所定数のサブタイトルストリームを含む所定フォーマットのコンテナを送信する送信ステップを有する
送信方法。
(10)それぞれ1つまたは2つ以上のサブタイトル情報を持つ所定数のサブタイトルストリームを含む所定フォーマットのコンテナを受信する受信部と、
上記所定数のサブタイトルストリームから1つのサブタイトルストリームを抽出する第1の抽出処理と、該抽出された1つのサブタイトルストリームから1つのサブタイトル情報を抽出する第2の抽出処理を制御する制御部を備える
受信装置。
(11)上記コンテナに、上記所定数のサブタイトルストリームのそれぞれに関する情報が挿入されており、
上記制御部は、
上記所定数のサブタイトルストリームのそれぞれに関する情報に基づいて、上記第1の抽出処理および上記第2の抽出処理のためのユーザインタフェース情報の表示処理をさらに制御する
前記(10)に記載の受信装置。
(12)受信部により、それぞれ1つまたは2つ以上のサブタイトル情報を持つ所定数のサブタイトルストリームを含む所定フォーマットのコンテナを受信する受信ステップと、
上記所定数のサブタイトルストリームから1つのサブタイトルストリームを抽出する第1の抽出処理と、該抽出された1つのサブタイトルストリームから1つのサブタイトル情報を抽出する第2の抽出処理を制御する制御ステップを有する
受信方法。
100・・・放送送出システム
110・・・ストリーム生成部
111・・・制御部
112・・・ビデオエンコーダ
113・・・オーディオエンコーダ
114・・・テキストフォーマット変換部
115・・・サブタイトルエンコーダ
116・・・TSフォーマッタ
200・・・テレビ受信機
201・・・受信部
202・・・TS解析部
203・・・ビデオデコーダ
204・・・ビデオ重畳部
205・・・パネル駆動回路
206・・・表示パネル
207・・・オーディオデコーダ
208・・・オーディオ出力回路
209・・・スピーカ
210・・・サブタイトルデコーダ
221・・・CPU
227・・・通信インタフェース
Claims (12)
- それぞれ1つまたは2つ以上のサブタイトル情報を持つ所定数のサブタイトルストリームを生成するサブタイトルエンコード部と、
上記所定数のサブタイトルストリームを含む所定フォーマットのコンテナを送信する送信部を備える
送信装置。 - 上記所定数のサブタイトルストリームは、それぞれ、セグメント化されたサブタイトル情報を持つ
請求項1に記載の送信装置。 - 上記サブタイトルエンコード部は、それぞれ言語の異なるサブタイトル情報を持つ複数のサブタイトルストリームを生成し、
上記複数のサブタイトルストリームは、それぞれ、内容の異なる複数のサブタイトル情報を持つ
請求項1に記載の送信装置。 - 上記サブタイトルエンコード部は、それぞれ内容の異なるサブタイトル情報を持つ複数のサブタイトルストリームを生成し、
上記複数のサブタイトルストリームは、それぞれ、言語の異なる複数のサブタイトル情報を持つ
請求項1に記載の送信装置。 - 上記コンテナに、上記所定数のサブタイトルストリームのそれぞれに関する情報を挿入する情報挿入部をさらに備える
請求項1に記載の送信装置。 - 上記サブタイトルストリームのそれぞれに関する情報には、対応するサブタイトルストリームが複数のサブタイトル情報を持つか否かを示すフラグ情報が含まれる
請求項5に記載の送信装置。 - 上記サブタイトルストリームのそれぞれに関する情報には、対応するサブタイトルストリームを識別する識別情報が含まれる
請求項5に記載の送信装置。 - 上記サブタイトルストリームのそれぞれに関する情報には、対応するサブタイトルストリームが持つ各サブタイトル情報を識別する識別情報が含まれる
請求項5に記載の送信装置。 - それぞれ1つまたは2つ以上のサブタイトル情報を持つ所定数のサブタイトルストリームを生成するサブタイトルエンコードステップと、
送信部により、上記所定数のサブタイトルストリームを含む所定フォーマットのコンテナを送信する送信ステップを有する
送信方法。 - それぞれ1つまたは2つ以上のサブタイトル情報を持つ所定数のサブタイトルストリームを含む所定フォーマットのコンテナを受信する受信部と、
上記所定数のサブタイトルストリームから1つのサブタイトルストリームを抽出する第1の抽出処理と、該抽出された1つのサブタイトルストリームから1つのサブタイトル情報を抽出する第2の抽出処理を制御する制御部を備える
受信装置。 - 上記コンテナに、上記所定数のサブタイトルストリームのそれぞれに関する情報が挿入されており、
上記制御部は、
上記所定数のサブタイトルストリームのそれぞれに関する情報に基づいて、上記第1の抽出処理および上記第2の抽出処理のためのユーザインタフェース情報の表示処理をさらに制御する
請求項10に記載の受信装置。 - 受信部により、それぞれ1つまたは2つ以上のサブタイトル情報を持つ所定数のサブタイトルストリームを含む所定フォーマットのコンテナを受信する受信ステップと、
上記所定数のサブタイトルストリームから1つのサブタイトルストリームを抽出する第1の抽出処理と、該抽出された1つのサブタイトルストリームから1つのサブタイトル情報を抽出する第2の抽出処理を制御する制御ステップを有する
受信方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016109483 | 2016-05-31 | ||
JP2016109483 | 2016-05-31 | ||
PCT/JP2017/018483 WO2017208818A1 (ja) | 2016-05-31 | 2017-05-17 | 送信装置、送信方法、受信装置および受信方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017208818A1 true JPWO2017208818A1 (ja) | 2019-03-28 |
JP7020406B2 JP7020406B2 (ja) | 2022-02-16 |
Family
ID=60478510
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018520780A Active JP7020406B2 (ja) | 2016-05-31 | 2017-05-17 | 送信装置、送信方法、受信装置および受信方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20190123842A1 (ja) |
EP (1) | EP3468204A4 (ja) |
JP (1) | JP7020406B2 (ja) |
CN (1) | CN109155866A (ja) |
AU (1) | AU2017274829A1 (ja) |
WO (1) | WO2017208818A1 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019134297A (ja) * | 2018-01-31 | 2019-08-08 | 東芝映像ソリューション株式会社 | 受信機 |
JP2019134295A (ja) * | 2018-01-31 | 2019-08-08 | 東芝映像ソリューション株式会社 | 受信機 |
JP2019134291A (ja) * | 2018-01-31 | 2019-08-08 | 東芝映像ソリューション株式会社 | 受信機 |
JP2019134296A (ja) * | 2018-01-31 | 2019-08-08 | 東芝映像ソリューション株式会社 | 受信機 |
JP2019134294A (ja) * | 2018-01-31 | 2019-08-08 | 東芝映像ソリューション株式会社 | 受信機 |
JP2019134290A (ja) * | 2018-01-31 | 2019-08-08 | 東芝映像ソリューション株式会社 | 受信機 |
JP2019134293A (ja) * | 2018-01-31 | 2019-08-08 | 東芝映像ソリューション株式会社 | 受信機 |
JP2019134292A (ja) * | 2018-01-31 | 2019-08-08 | 東芝映像ソリューション株式会社 | 受信機 |
US12003825B1 (en) * | 2022-09-21 | 2024-06-04 | Amazon Technologies, Inc. | Enhanced control of video subtitles |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013534097A (ja) * | 2010-06-18 | 2013-08-29 | サムスン エレクトロニクス カンパニー リミテッド | 字幕サービスを含むデジタル放送サービスを提供する方法及びその装置 |
WO2015093856A1 (en) * | 2013-12-19 | 2015-06-25 | Lg Electronics Inc. | Broadcast transmitting device and operating method thereof, and broadcast receiving device and operating method thereof |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5294982A (en) * | 1991-12-24 | 1994-03-15 | National Captioning Institute, Inc. | Method and apparatus for providing dual language captioning of a television program |
KR101061115B1 (ko) * | 2004-08-13 | 2011-08-31 | 엘지전자 주식회사 | 디지털 방송 수신기 및 그의 서브타이틀 데이터 처리 방법 |
JP5685969B2 (ja) | 2011-02-15 | 2015-03-18 | ソニー株式会社 | 表示制御方法、表示制御装置 |
WO2012169813A2 (ko) * | 2011-06-09 | 2012-12-13 | 엘지전자 주식회사 | 방송 서비스 전송 방법, 그 수신 방법 및 그 수신 장치 |
JP2013066075A (ja) * | 2011-09-01 | 2013-04-11 | Sony Corp | 送信装置、送信方法および受信装置 |
FR3025925B1 (fr) * | 2014-09-17 | 2016-12-23 | France Brevets | Procede de controle de modes de presentation de sous-titres |
-
2017
- 2017-05-17 JP JP2018520780A patent/JP7020406B2/ja active Active
- 2017-05-17 EP EP17806376.4A patent/EP3468204A4/en not_active Withdrawn
- 2017-05-17 US US16/094,539 patent/US20190123842A1/en not_active Abandoned
- 2017-05-17 AU AU2017274829A patent/AU2017274829A1/en not_active Abandoned
- 2017-05-17 CN CN201780031780.8A patent/CN109155866A/zh active Pending
- 2017-05-17 WO PCT/JP2017/018483 patent/WO2017208818A1/ja unknown
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013534097A (ja) * | 2010-06-18 | 2013-08-29 | サムスン エレクトロニクス カンパニー リミテッド | 字幕サービスを含むデジタル放送サービスを提供する方法及びその装置 |
WO2015093856A1 (en) * | 2013-12-19 | 2015-06-25 | Lg Electronics Inc. | Broadcast transmitting device and operating method thereof, and broadcast receiving device and operating method thereof |
Also Published As
Publication number | Publication date |
---|---|
US20190123842A1 (en) | 2019-04-25 |
WO2017208818A1 (ja) | 2017-12-07 |
EP3468204A4 (en) | 2019-05-08 |
CN109155866A (zh) | 2019-01-04 |
AU2017274829A1 (en) | 2018-12-20 |
JP7020406B2 (ja) | 2022-02-16 |
EP3468204A1 (en) | 2019-04-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7020406B2 (ja) | 送信装置、送信方法、受信装置および受信方法 | |
EP3432585B1 (en) | Transmission device, transmission method, reception device and reception method | |
US11765330B2 (en) | Transmitter, transmission method, receiver, and reception method | |
JP2023001309A (ja) | 送信方法、送信装置および受信装置 | |
WO2016039285A1 (ja) | 送信装置、送信方法、受信装置および受信方法 | |
JP2023052611A (ja) | 送信装置、送信方法、メディア処理装置、メディア処理方法および受信装置 | |
JP6455974B2 (ja) | 受信機 | |
US11290785B2 (en) | Transmission apparatus, transmission method, reception apparatus, and reception method for transmitting subtitle text information | |
EP3407614B1 (en) | Method and apparatus for transmitting and receiving broadcast signal | |
EP3435679A1 (en) | Broadcast signal transmission and reception method and device | |
CN109479154B (zh) | 发送装置、发送方法、接收装置和接收方法 | |
JP6868776B2 (ja) | 送信装置、送信方法、受信装置および受信方法 | |
EP3306941B1 (en) | Transmission device, transmission method, media processing device and media processing method | |
US11057683B2 (en) | Receiving device, receiving method, transmitting device, and transmitting method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200407 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200407 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210629 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210817 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220104 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220117 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7020406 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |