JP2021056483A - 音声認識制御方法、装置、電子デバイス及び読み取り可能な記憶媒体 - Google Patents
音声認識制御方法、装置、電子デバイス及び読み取り可能な記憶媒体 Download PDFInfo
- Publication number
- JP2021056483A JP2021056483A JP2019237718A JP2019237718A JP2021056483A JP 2021056483 A JP2021056483 A JP 2021056483A JP 2019237718 A JP2019237718 A JP 2019237718A JP 2019237718 A JP2019237718 A JP 2019237718A JP 2021056483 A JP2021056483 A JP 2021056483A
- Authority
- JP
- Japan
- Prior art keywords
- operating state
- scene
- voice recognition
- target scene
- audio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 64
- 230000015654 memory Effects 0.000 claims description 23
- 230000004044 response Effects 0.000 claims description 9
- 238000001914 filtration Methods 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 10
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000013473 artificial intelligence Methods 0.000 description 3
- 238000004590 computer program Methods 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005265 energy consumption Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/02—Feature extraction for speech recognition; Selection of recognition unit
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/18—Speech classification or search using natural language modelling
- G10L15/1815—Semantic context, e.g. disambiguation of the recognition hypotheses based on word meaning
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification techniques
- G10L17/22—Interactive procedures; Man-machine interfaces
- G10L17/24—Interactive procedures; Man-machine interfaces the user being prompted to utter a password or a predefined phrase
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L2015/088—Word spotting
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Computational Linguistics (AREA)
- Theoretical Computer Science (AREA)
- Artificial Intelligence (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
ターゲットシーンに関連するアプリケーションプログラムインターフェイスを呼び出したことが検出された場合、第1動作状態の構成情報を照会し、ターゲットシーンが第1動作状態に適用されるか否かを決定し、ターゲットシーンが第1動作状態に適用される場合、ウェイクワードに基づいてオーディオクリップを収集し、オーディオクリップを音声認識する実行中の第2動作状態を第1動作状態に切り替え、第1動作状態で、オーディオを連続的に収集してオーディオストリームを取得して、オーディオストリームを音声認識する。これにより、さまざまなユーザのパーソナライズニーズを満たすように、ユーザが自分のニーズに応じて、第1動作状態をトリガーするシーンを設定することができ、また、ターゲットシーンが第1動作状態に適用される場合のみ、装置が第1動作状態に入るように制御し、ユーザに対する迷惑を減らし、ユーザ体験を改善することができる。
ステップ401において、ターゲットシーンで、第1動作状態の構成情報を照会し、ターゲットシーンが第1動作状態に適用されるか否かを決定する。
たとえば、図6に示される照会モジュール601、切り替えモジュール602、および認識モジュール603)を記憶することができる。プロセッサ901は、メモリ902に記憶されている非一時的なソフトウェアプログラム、命令、およびモジュールを実行することにより、サーバの様々な機能的アプリケーションおよびデータ処理を実行し、すなわち、前述の方法の実施例における音声制御方法を実現する。
Claims (16)
- ターゲットシーンに関連するアプリケーションプログラムインターフェイスを呼び出したことが検出された場合、第1動作状態の構成情報を照会し、前記ターゲットシーンが第1動作状態に適用されるか否かを決定するステップと、
前記ターゲットシーンが前記第1動作状態に適用される場合、実行中の第2動作状態を前記第1動作状態に切り替えるステップであって、前記第2動作状態で、ウェイクワードに基づいてオーディオクリップを収集し、前記オーディオクリップを音声認識するステップと、
前記第1動作状態で、オーディオを連続的に収集してオーディオストリームを取得して、前記オーディオストリームを音声認識するステップと、を含むことを特徴とする、音声認識制御方法。 - 前記実行中の第2動作状態を前記第1動作状態に切り替えるステップの前に、
前記第2動作状態で、前記オーディオクリップを音声認識することにより取得された第1制御意図を取得するステップと、
前記第1制御意図が前記ターゲットシーンとマッチングすると決定するステップと、をさらに含むことを特徴とする、請求項1に記載の音声認識制御方法。 - 前記オーディオを連続的に収集してオーディオストリームを取得して、前記オーディオストリームを音声認識するステップの後に、
前記オーディオストリームを音声認識することにより取得された情報ストリームを取得するステップと、
前記情報ストリームから各候補意図を取得するステップと、
各候補意図から前記ターゲットシーンの制御意図とマッチングする第2制御意図をフィルタリングするステップと、
前記第2制御意図がフィルタリングして取得された場合、前記第2制御意図に対応する制御命令を実行するステップと、をさらに含むことを特徴とする、請求項1に記載の音声認識制御方法。 - 前記各候補意図から前記ターゲットシーンの制御意図とマッチングする第2制御意図をフィルタリングするステップの後に、
設定期間内に、前記第2制御意図が取得されなかった場合、前記第1動作状態を終了するステップをさらに含み、
前記設定期間の範囲は、20秒〜40秒であることを特徴とする、請求項3に記載の音声認識制御方法。 - 前記情報ストリームから各候補意図を取得するステップの後に、
前記ターゲットシーンの制御意図とマッチングしない候補意図への応答を拒否するステップをさらに含むことを特徴とする、請求項3に記載の音声認識制御方法。 - 前記構成情報は、前記第1動作状態に適用されるシーンリストを含み、前記シーンリストはユーザの選択操作に応答して、音楽シーン、オーディオブックシーン及びビデオシーンから選択して生成されるものであることを特徴とする、請求項1から5のいずれかに記載の音声認識制御方法。
- ターゲットシーンに関連するアプリケーションプログラムインターフェイスを呼び出したことが検出された場合、第1動作状態の構成情報を照会し、前記ターゲットシーンが第1動作状態に適用されるか否かを決定するための照会モジュールと、
ターゲットシーンが前記第1動作状態に適用される場合、実行中の第2動作状態を前記第1動作状態に切り替えるための切り替えモジュールであって、前記第2動作状態で、ウェイクワードに基づいてオーディオクリップを収集し、前記オーディオクリップを音声認識する切り替えモジュールと、
前記第1動作状態で、オーディオを連続的に収集してオーディオストリームを取得して、前記オーディオストリームを音声認識する認識モジュールと、を含むことを特徴とする、音声認識制御装置。 - 前記第2動作状態で、前記オーディオクリップを音声認識することにより取得された第1制御意図を取得するための第1取得モジュールと、
前記第1制御意図が前記ターゲットシーンとマッチングすると決定するための決定モジュールと、をさらに含むことを特徴とする、請求項7に記載の音声認識制御装置。 - 前記オーディオストリームを音声認識することにより取得された情報ストリームを取得し、前記情報ストリームから各候補意図を取得するための第2取得モジュールと、
各候補意図から前記ターゲットシーンの制御意図とマッチングする第2制御意図をフィルタリングするためのフィルタリングモジュールと、
前記第2制御意図がフィルタリングして取得された場合、前記第2制御意図に対応する制御命令を実行するための実行モジュールと、をさらに含むことを特徴とする、請求項7に記載の音声認識制御装置。 - 設定期間内に、前記第2制御意図が取得されなかった場合、前記第1動作状態を終了するための終了モジュールをさらに備え、
前記設定期間の範囲は、20秒〜40秒であることを特徴とする、請求項9に記載の音声認識制御装置。 - 前記ターゲットシーンの制御意図とマッチングしない候補意図への応答を拒否するための拒否モジュールをさらに含むことを特徴とする、請求項9に記載の音声認識制御装置。
- 前記構成情報は、前記第1動作状態に適用されるシーンリストを含み、前記シーンリストはユーザの選択操作に応答して、音楽シーン、オーディオブックシーン及びビデオシーンから選択して生成されるものであることを特徴とする、請求項7から11のいずれかに記載の音声認識制御装置。
- ターゲットシーンで、第1動作状態の構成情報を照会し、前記ターゲットシーンが第1動作状態に適用されるか否かを決定するステップと、
前記ターゲットシーンが前記第1動作状態に適用される場合、実行中の第2動作状態を前記第1動作状態に切り替えるステップであって、前記第2動作状態で、ウェイクワードに基づいてオーディオクリップを収集し、前記オーディオクリップを音声認識するステップと、
前記第1動作状態で、オーディオを連続的に収集してオーディオストリームを取得して、前記オーディオストリームを音声認識するステップと、を含むことを特徴とする、音声認識制御方法。 - ターゲットシーンで、第1動作状態の構成情報を照会し、前記ターゲットシーンが第1動作状態に適用されるか否かを決定するための照会モジュールと、
前記ターゲットシーンが前記第1動作状態に適用される場合、実行中の第2動作状態を前記第1動作状態に切り替えるための切り替えモジュールであって、前記第2動作状態で、ウェイクワードに基づいてオーディオクリップを収集し、前記オーディオクリップを音声認識するための切り替えモジュールと、
前記第1動作状態で、オーディオを連続的に収集してオーディオストリームを取得して、前記オーディオストリームを音声認識する認識モジュールと、を含むことを特徴とする、音声認識制御装置。 - 少なくとも1つのプロセッサと、
前記少なくとも1つのプロセッサに通信可能に接続されるメモリと、を備え、
前記メモリには前記少なくとも1つのプロセッサによって実行可能な命令が記憶され、前記命令が前記少なくとも1つのプロセッサによって実行されることにより、前記少なくとも1つのプロセッサが請求項1〜6のいずれかに記載の音声認識制御方法、又は、請求項13に記載の音声認識制御方法を実行可能であることを特徴とする、電子デバイス。 - コンピュータ命令が記憶されている非一時的なコンピュータ読み取り可能な記憶媒体であって、
前記コンピュータ命令は、前記コンピュータに請求項1から6のいずれかに記載の音声認識制御方法、又は、請求項13に記載の音声認識制御方法を実行させることを特徴とする、非一時的なコンピュータ読み取り可能な記憶媒体。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910933124.8A CN112669831B (zh) | 2019-09-29 | 2019-09-29 | 语音识别控制方法、装置、电子设备和可读存储介质 |
CN201910933124.8 | 2019-09-29 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021056483A true JP2021056483A (ja) | 2021-04-08 |
JP7051799B2 JP7051799B2 (ja) | 2022-04-11 |
Family
ID=69055817
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019237718A Active JP7051799B2 (ja) | 2019-09-29 | 2019-12-27 | 音声認識制御方法、装置、電子デバイス及び読み取り可能な記憶媒体 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20210097993A1 (ja) |
EP (1) | EP3799040A1 (ja) |
JP (1) | JP7051799B2 (ja) |
KR (1) | KR102331254B1 (ja) |
CN (1) | CN112669831B (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113409758A (zh) * | 2021-06-10 | 2021-09-17 | 恒大新能源汽车投资控股集团有限公司 | 一种智能语音的交互方法、装置和系统 |
CN113805698B (zh) * | 2021-09-10 | 2024-05-03 | 中国第一汽车股份有限公司 | 一种执行指令确定方法、装置、设备及存储介质 |
CN114244879A (zh) * | 2021-12-15 | 2022-03-25 | 北京声智科技有限公司 | 一种工业控制系统、工业控制方法和电子设备 |
CN114785838B (zh) * | 2022-03-30 | 2024-01-26 | 青岛海尔科技有限公司 | 设备的控制方法和装置、存储介质及电子装置 |
CN114900505B (zh) * | 2022-04-18 | 2024-01-30 | 广州市迪士普音响科技有限公司 | 一种基于web的音频场景定时切换方法、装置及介质 |
CN117196449B (zh) * | 2023-11-08 | 2024-04-09 | 讯飞智元信息科技有限公司 | 一种视频识别方法、系统以及相关装置 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9542941B1 (en) * | 2015-10-01 | 2017-01-10 | Lenovo (Singapore) Pte. Ltd. | Situationally suspending wakeup word to enable voice command input |
US20170169817A1 (en) * | 2015-12-09 | 2017-06-15 | Lenovo (Singapore) Pte. Ltd. | Extending the period of voice recognition |
WO2018135753A1 (ko) * | 2017-01-17 | 2018-07-26 | 삼성전자주식회사 | 전자 장치 및 그의 동작 방법 |
WO2019022797A1 (en) * | 2017-07-25 | 2019-01-31 | Google Llc | STATEMENT CLASSIFIER |
US20190139547A1 (en) * | 2017-11-08 | 2019-05-09 | Alibaba Group Holding Limited | Interactive Method and Device |
JP2019139146A (ja) * | 2018-02-14 | 2019-08-22 | オンキヨー株式会社 | 音声認識システム、及び、音声認識方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014084413A1 (ko) * | 2012-11-28 | 2014-06-05 | 엘지전자 주식회사 | 가전 기기 구동 장치 및 방법 |
CN106782554B (zh) * | 2016-12-19 | 2020-09-25 | 百度在线网络技术(北京)有限公司 | 基于人工智能的语音唤醒方法和装置 |
CN107564518B (zh) * | 2017-08-21 | 2021-10-22 | 百度在线网络技术(北京)有限公司 | 智能设备控制方法、装置及计算机设备 |
CN110277094A (zh) * | 2018-03-14 | 2019-09-24 | 阿里巴巴集团控股有限公司 | 设备的唤醒方法、装置及电子设备 |
US11074249B2 (en) * | 2018-04-10 | 2021-07-27 | Intel Corporation | Dynamic adaptation of language understanding systems to acoustic environments |
CN109473100A (zh) * | 2018-11-12 | 2019-03-15 | 四川驹马科技有限公司 | 基于语音识别的业务场景语音人机交互方法及其系统 |
CN109524010A (zh) * | 2018-12-24 | 2019-03-26 | 出门问问信息科技有限公司 | 一种语音控制方法、装置、设备及存储介质 |
-
2019
- 2019-09-29 CN CN201910933124.8A patent/CN112669831B/zh active Active
- 2019-12-27 KR KR1020190175877A patent/KR102331254B1/ko active IP Right Grant
- 2019-12-27 JP JP2019237718A patent/JP7051799B2/ja active Active
- 2019-12-30 EP EP19219976.8A patent/EP3799040A1/en active Pending
- 2019-12-30 US US16/730,534 patent/US20210097993A1/en not_active Abandoned
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9542941B1 (en) * | 2015-10-01 | 2017-01-10 | Lenovo (Singapore) Pte. Ltd. | Situationally suspending wakeup word to enable voice command input |
US20170169817A1 (en) * | 2015-12-09 | 2017-06-15 | Lenovo (Singapore) Pte. Ltd. | Extending the period of voice recognition |
WO2018135753A1 (ko) * | 2017-01-17 | 2018-07-26 | 삼성전자주식회사 | 전자 장치 및 그의 동작 방법 |
WO2019022797A1 (en) * | 2017-07-25 | 2019-01-31 | Google Llc | STATEMENT CLASSIFIER |
US20190139547A1 (en) * | 2017-11-08 | 2019-05-09 | Alibaba Group Holding Limited | Interactive Method and Device |
JP2019139146A (ja) * | 2018-02-14 | 2019-08-22 | オンキヨー株式会社 | 音声認識システム、及び、音声認識方法 |
Also Published As
Publication number | Publication date |
---|---|
US20210097993A1 (en) | 2021-04-01 |
CN112669831B (zh) | 2022-10-21 |
JP7051799B2 (ja) | 2022-04-11 |
KR20210038811A (ko) | 2021-04-08 |
CN112669831A (zh) | 2021-04-16 |
EP3799040A1 (en) | 2021-03-31 |
KR102331254B1 (ko) | 2021-11-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7051799B2 (ja) | 音声認識制御方法、装置、電子デバイス及び読み取り可能な記憶媒体 | |
KR102320708B1 (ko) | 영상 재생 방법, 장치, 전자 기기 및 판독 가능 저장 매체 | |
CN111192591B (zh) | 智能设备的唤醒方法、装置、智能音箱及存储介质 | |
JP7051798B2 (ja) | 音声認識制御方法、装置、電子デバイスと読み取り可能な記憶媒体 | |
KR102358012B1 (ko) | 음성 제어 방법, 장치, 전자 기기 및 판독 가능 저장 매체 | |
JP7017598B2 (ja) | スマートデバイスのデータ処理方法、装置、機器及び記憶媒体 | |
JP7381518B2 (ja) | アプリケーションプログラムの操作ガイダンス方法、装置、機器及び読み取り可能な記憶媒体 | |
JP6967095B2 (ja) | プログラムの起動方法、装置、デバイス及び記憶媒体 | |
WO2021196617A1 (zh) | 一种语音交互方法、装置、电子设备及存储介质 | |
JP7051800B2 (ja) | 音声制御方法、音声制御装置、電子デバイス、および読み取り可能な記憶媒体 | |
CN112825013A (zh) | 终端设备的控制方法和装置 | |
JP2022024110A (ja) | 音声認識方法、装置、電子機器及び記憶媒体 | |
KR20230118164A (ko) | 디바이스 또는 어시스턴트-특정 핫워드들의 단일 발언으로의결합 | |
JP2021056989A (ja) | 音声スキル推薦方法、装置、機器及び記憶媒体 | |
KR20210038277A (ko) | 음성 제어 방법, 장치, 전자 기기 및 판독 가능 저장 매체 | |
CN116182215A (zh) | 智能化吸油烟机控制方法、装置、终端设备及存储介质 | |
CN112804593A (zh) | 一种应用系统音量的控制方法、装置、机器人及存储介质 | |
CN117880687A (zh) | 耳机控制方法和电子设备 | |
CN116820383A (zh) | 一种音源控制方法、装置、系统、设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210202 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210428 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20210531 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20210806 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20210914 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220114 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20220114 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20220124 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20220125 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220329 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220330 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7051799 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |