JP2021182131A - 情報を出力するための方法、装置及びシステム、電子デバイス、コンピュータ可読記憶媒体及びコンピュータプログラム - Google Patents
情報を出力するための方法、装置及びシステム、電子デバイス、コンピュータ可読記憶媒体及びコンピュータプログラム Download PDFInfo
- Publication number
- JP2021182131A JP2021182131A JP2021053715A JP2021053715A JP2021182131A JP 2021182131 A JP2021182131 A JP 2021182131A JP 2021053715 A JP2021053715 A JP 2021053715A JP 2021053715 A JP2021053715 A JP 2021053715A JP 2021182131 A JP2021182131 A JP 2021182131A
- Authority
- JP
- Japan
- Prior art keywords
- information
- alarm
- users
- audio
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 53
- 238000004590 computer program Methods 0.000 title claims description 18
- 238000013136 deep learning model Methods 0.000 claims abstract description 33
- 230000002159 abnormal effect Effects 0.000 claims abstract description 22
- 230000002996 emotional effect Effects 0.000 claims description 24
- 238000004458 analytical method Methods 0.000 claims description 19
- 230000008909 emotion recognition Effects 0.000 claims description 16
- 230000008451 emotion Effects 0.000 claims description 14
- 230000004044 response Effects 0.000 claims description 13
- 230000001960 triggered effect Effects 0.000 claims description 9
- 238000012360 testing method Methods 0.000 claims description 7
- 238000001514 detection method Methods 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000012549 training Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000003062 neural network model Methods 0.000 description 2
- 206010044565 Tremor Diseases 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000009429 distress Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000006996 mental state Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000003449 preventive effect Effects 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000029305 taxis Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
- G08B25/016—Personal emergency signalling and security systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Emergency Management (AREA)
- Business, Economics & Management (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Artificial Intelligence (AREA)
- Computing Systems (AREA)
- Biophysics (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Biomedical Technology (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Life Sciences & Earth Sciences (AREA)
- Traffic Control Systems (AREA)
- Alarm Systems (AREA)
- Emergency Alarm Devices (AREA)
- Telephonic Communication Services (AREA)
Abstract
Description
Claims (18)
- 車内の異なる位置にある少なくとも2つのオーディオ収集装置によって、それぞれオーディオデータを収集することと、
収集された少なくとも2ウェイのオーディオデータに対してエコー除去を行うことと、
エコー除去された後のデータをそれぞれ少なくとも2つの音声認識エンジンに入力し、音声認識を行うことにより、少なくとも2人のユーザのテキスト情報を得ることと、
サービス側が予めトレーニングされた深層学習モデルを通じてテキスト情報の分析を行うために、前記少なくとも2つのオーディオ収集装置の位置及び対応する少なくとも2人のユーザのテキスト情報をサービス側にアップロードし、分析結果がアラーム条件を満たした場合、アラーム情報を出力することと、
を含む情報を出力するための方法。 - エコー除去された後のデータをそれぞれ少なくとも2つの感情認識エンジンに入力し、感情認識を行うことにより、少なくとも2人のユーザの感情情報を得ることと、
サービス側が予めトレーニングされた深層学習モデルを通じてテキスト情報および感情の分析を行うために、前記少なくとも2つのオーディオ収集装置の位置、対応する少なくとも2人のユーザのテキスト情報、及び2人のユーザの感情情報をサービス側にアップロードし、分析結果がアラーム条件を満たした場合、アラーム情報を出力することと、
をさらに含む請求項1に記載の方法。 - 車両からアップロードされた少なくとも2つのオーディオ収集装置の位置及び対応する少なくとも2人のユーザのテキスト情報を受信することと、
前記少なくとも2つのオーディオ収集装置の位置に基づいて、2人のユーザのテキスト情報を会話ストリームに構成することと、
前記会話ストリームを予めトレーニングされた深層学習モデルに入力することにより、会話が異常である確率を得ることと、
前記確率が所定の第1閾値より高い場合、アラームをトリガすることと、
を含む情報を出力するための方法。 - 前記車両の属性情報および位置情報を取得することと、
前記位置情報に基づいて、前記車両に最も近い交通警察を検索することと、
前記車両の属性情報および位置情報を前記交通警察に送信することと、
をさらに含む請求項3に記載の方法。 - 少なくとも2人のユーザの感情情報を受信することと、
会話が異常である確率が所定の第2閾値未満であり、乗客の感情情報に恐怖感が含まれる場合、アラームをトリガすることと、
をさらに含む請求項3に記載の方法。 - 前記車両のオーディオ収集装置の回路接続の切断が検出されたことに応答して、アラームをトリガすること、
をさらに含む請求項3に記載の方法。 - 乗客が回答するためのテスト問題を前記車両に定期的に送信することと、
所定の時間内に前記深層学習モデルによって正常であると判定された応答情報を受信しない場合、アラームをトリガすることと、
をさらに含む請求項3に記載の方法。 - 車内の異なる位置にある少なくとも2つのオーディオ収集装置によって、それぞれオーディオデータを収集するように配置されたオーディオ収集ユニットと、
収集された少なくとも2ウェイのオーディオデータに対してエコー除去を行うように配置されたエコー除去ユニットと、
エコー除去された後のデータをそれぞれ少なくとも2つの音声認識エンジンに入力し、音声認識を行うことにより、少なくとも2人のユーザのテキスト情報を得るように配置された音声認識ユニットと、
サービス側が予めトレーニングされた深層学習モデルを通じてテキスト情報の分析を行うために、前記少なくとも2つのオーディオ収集装置の位置及び対応する少なくとも2人のユーザのテキスト情報をサービス側にアップロードし、分析結果がアラーム条件を満たした場合、アラーム情報を出力するように配置された情報アップロードユニットと、
を含む情報を出力するための装置。 - エコー除去された後のデータをそれぞれ少なくとも2つの感情認識エンジンに入力し、感情認識を行うことにより、少なくとも2人のユーザの感情情報を得るように配置された感情認識ユニットをさらに含み、
前記情報アップロードユニットは、さらに、サービス側が予めトレーニングされた深層学習モデルを通じてテキスト情報および感情の分析を行うために、前記少なくとも2つのオーディオ収集装置の位置、対応する少なくとも2人のユーザのテキスト情報、及び2人のユーザの感情情報をサービス側にアップロードし、分析結果がアラーム条件を満たした場合、アラーム情報を出力するように配置される、
請求項8に記載の装置。 - 車両からアップロードされた少なくとも2つのオーディオ収集装置の位置及び対応する少なくとも2人のユーザのテキスト情報を受信するように配置された受信ユニットと、
前記少なくとも2つのオーディオ収集装置の位置に基づいて、2人のユーザのテキスト情報を会話ストリームに構成するように配置されたテキストスティッチングユニットと、
前記会話ストリームを予めトレーニングされた深層学習モデルに入力することにより、会話が異常である確率を得るように配置された会話認識ユニットと、
前記確率が所定の第1閾値より高い場合、アラームをトリガするように配置されたアラームユニットと、
を含む情報を出力するための装置。 - 前記アラームユニットは、さらに、
前記車両の属性情報および位置情報を取得し、
前記位置情報に基づいて、前記車両に最も近い交通警察を検索し、
前記車両の属性情報および位置情報を前記交通警察に送信する、
ように配置される、
請求項10に記載の装置。 - 前記受信ユニットは、さらに、少なくとも2人のユーザの感情情報を受信するように配置され、
前記アラームユニットは、さらに、会話が異常である確率が所定の第2閾値未満であり、乗客の感情情報に恐怖感が含まれる場合、アラームをトリガするように配置される、
請求項10に記載の装置。 - 前記アラームユニットは、さらに、前記車両のオーディオ収集装置の回路接続の切断が検出されたことに応答して、アラームをトリガするように配置される、
請求項10に記載の装置。 - 前記アラームユニットは、さらに、
乗客が回答するためのテスト問題を前記車両に定期的に送信し、
所定の時間内に前記深層学習モデルによって正常であると判定された応答情報を受信しない場合、アラームをトリガする、
ように配置される、
請求項10に記載の装置。 - 車内の異なる位置にある少なくとも2つのオーディオ収集装置によって、それぞれオーディオデータを収集し、収集された少なくとも2ウェイのオーディオデータに対してエコー除去を行い、エコー除去された後のデータをそれぞれ少なくとも2つの音声認識エンジンに入力し、音声認識を行うことにより、少なくとも2人のユーザのテキスト情報を得て、前記少なくとも2つのオーディオ収集装置の位置及び対応する少なくとも2人のユーザのテキスト情報をサービス側にアップロードするように配置された車両と、
車両からアップロードされた少なくとも2つのオーディオ収集装置の位置及び対応する少なくとも2人のユーザのテキスト情報を受信し、前記少なくとも2つのオーディオ収集装置の位置に基づいて、2人のユーザのテキスト情報を会話ストリームに構成し、前記会話ストリームを予めトレーニングされた深層学習モデルに入力することにより、会話が異常である確率を得て、前記確率が所定の第1閾値より高い場合、アラームをトリガするように配置されたサービス側と、
を含む情報を出力するためのシステム。 - 1つ以上のプロセッサと、
1つ以上のプログラムが記憶された記憶装置と、
を含み、
前記1つ以上のプログラムが前記1つ以上のプロセッサによって実行されるとき、請求項1から7のいずれか1項に記載の方法を前記1つ以上のプロセッサに実現させる、
情報を出力するための電子機器。 - コンピュータプログラムが記憶されたコンピュータ可読媒体であって、
前記コンピュータプログラムがプロセッサによって実行されるとき、請求項1から7のいずれか1項に記載の方法を実現する、
コンピュータ可読媒体。 - コンピュータプログラムであって、
前記コンピュータプログラムがプロセッサによって実行されると、請求項1から7のいずれか1項に記載の方法を実現する、
コンピュータプログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010471698.0A CN111489522A (zh) | 2020-05-29 | 2020-05-29 | 用于输出信息的方法、装置和系统 |
CN202010471698.0 | 2020-05-29 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021182131A true JP2021182131A (ja) | 2021-11-25 |
JP7160454B2 JP7160454B2 (ja) | 2022-10-25 |
Family
ID=71792443
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021053715A Active JP7160454B2 (ja) | 2020-05-29 | 2021-03-26 | 情報を出力するための方法、装置及びシステム、電子デバイス、コンピュータ可読記憶媒体及びコンピュータプログラム |
Country Status (3)
Country | Link |
---|---|
JP (1) | JP7160454B2 (ja) |
KR (1) | KR20210042860A (ja) |
CN (1) | CN111489522A (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113470696A (zh) * | 2021-07-01 | 2021-10-01 | 首约科技(北京)有限公司 | 通过实时音频流分析解决司乘安全及提升服务质量的方法 |
CN114582105A (zh) * | 2022-03-01 | 2022-06-03 | 福建环宇通信息科技股份公司 | 一种窗口监测方法 |
CN116721678A (zh) * | 2022-09-29 | 2023-09-08 | 荣耀终端有限公司 | 音频数据的监测方法、电子设备以及介质 |
CN117966313A (zh) * | 2024-03-28 | 2024-05-03 | 四川中兴纺织有限责任公司 | 一种纺织设备监控系统及方法 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115698982A (zh) * | 2020-10-20 | 2023-02-03 | 北京嘀嘀无限科技发展有限公司 | 基于机器学习检测运输服务相关安全问题的人工智能系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009294790A (ja) * | 2008-06-03 | 2009-12-17 | Denso Corp | 自動車用情報提供システム |
JP2014170154A (ja) * | 2013-03-05 | 2014-09-18 | Panasonic Corp | 車内会話支援装置 |
CN108986430A (zh) * | 2018-09-13 | 2018-12-11 | 苏州工业职业技术学院 | 基于语音识别的网约车安全预警方法和系统 |
US20200152200A1 (en) * | 2017-07-19 | 2020-05-14 | Alibaba Group Holding Limited | Information processing method, system, electronic device, and computer storage medium |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102881063B (zh) * | 2012-09-28 | 2015-07-08 | 北京经纬恒润科技有限公司 | 一种高频接收分时处理的方法及装置 |
US20170221336A1 (en) * | 2016-01-28 | 2017-08-03 | Flex Ltd. | Human voice feedback system |
CN106603367A (zh) * | 2017-02-28 | 2017-04-26 | 北京艾利特科技有限公司 | 一种用于时间同步的can总线通信方法 |
CN108630193B (zh) * | 2017-03-21 | 2020-10-02 | 北京嘀嘀无限科技发展有限公司 | 语音识别方法及装置 |
CN107240405B (zh) * | 2017-06-14 | 2021-04-30 | 深圳市冠旭电子股份有限公司 | 一种音箱及告警方法 |
CN108053625A (zh) * | 2017-12-06 | 2018-05-18 | 新华三技术有限公司 | 一种报警方法和装置 |
CN108922564B (zh) * | 2018-06-29 | 2021-05-07 | 北京百度网讯科技有限公司 | 情绪识别方法、装置、计算机设备及存储介质 |
CN109167615B (zh) * | 2018-08-16 | 2021-08-10 | 江苏林洋能源股份有限公司 | 一种基于g3-plc通信网络的上下行分时通信的方法 |
CN109448317A (zh) * | 2018-12-26 | 2019-03-08 | 上海理工大学 | 出租车自动报警系统 |
CN109920405A (zh) * | 2019-03-05 | 2019-06-21 | 百度在线网络技术(北京)有限公司 | 多路语音识别方法、装置、设备及可读存储介质 |
CN209928582U (zh) * | 2019-05-20 | 2020-01-10 | 宁波纷享安行智能科技有限公司 | 一种汽车报警装置以及汽车 |
CN110083643A (zh) * | 2019-05-20 | 2019-08-02 | 广州国联智慧信息技术有限公司 | 一种基于身份识别和安全监管的行车记录分析系统及方法 |
CN110580799A (zh) * | 2019-06-19 | 2019-12-17 | 四川鼎鸿物联网科技有限公司 | 一种出租车网约车驾乘人员言行自动预判报警系统 |
CN110718040A (zh) * | 2019-09-04 | 2020-01-21 | 上海博泰悦臻电子设备制造有限公司 | 车内环境监控方法、系统、服务器、终端及存储介质 |
CN111145759B (zh) * | 2019-12-27 | 2020-10-02 | 周洋 | 一种出行业用基于声纹特征识别的语音报警系统 |
-
2020
- 2020-05-29 CN CN202010471698.0A patent/CN111489522A/zh active Pending
-
2021
- 2021-03-26 JP JP2021053715A patent/JP7160454B2/ja active Active
- 2021-03-31 KR KR1020210041794A patent/KR20210042860A/ko not_active Application Discontinuation
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009294790A (ja) * | 2008-06-03 | 2009-12-17 | Denso Corp | 自動車用情報提供システム |
JP2014170154A (ja) * | 2013-03-05 | 2014-09-18 | Panasonic Corp | 車内会話支援装置 |
US20200152200A1 (en) * | 2017-07-19 | 2020-05-14 | Alibaba Group Holding Limited | Information processing method, system, electronic device, and computer storage medium |
CN108986430A (zh) * | 2018-09-13 | 2018-12-11 | 苏州工业职业技术学院 | 基于语音识别的网约车安全预警方法和系统 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113470696A (zh) * | 2021-07-01 | 2021-10-01 | 首约科技(北京)有限公司 | 通过实时音频流分析解决司乘安全及提升服务质量的方法 |
CN114582105A (zh) * | 2022-03-01 | 2022-06-03 | 福建环宇通信息科技股份公司 | 一种窗口监测方法 |
CN116721678A (zh) * | 2022-09-29 | 2023-09-08 | 荣耀终端有限公司 | 音频数据的监测方法、电子设备以及介质 |
CN117966313A (zh) * | 2024-03-28 | 2024-05-03 | 四川中兴纺织有限责任公司 | 一种纺织设备监控系统及方法 |
CN117966313B (zh) * | 2024-03-28 | 2024-06-07 | 四川中兴纺织有限责任公司 | 一种纺织设备监控系统及方法 |
Also Published As
Publication number | Publication date |
---|---|
KR20210042860A (ko) | 2021-04-20 |
JP7160454B2 (ja) | 2022-10-25 |
CN111489522A (zh) | 2020-08-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2021182131A (ja) | 情報を出力するための方法、装置及びシステム、電子デバイス、コンピュータ可読記憶媒体及びコンピュータプログラム | |
US9392431B2 (en) | Automatic vehicle crash detection using onboard devices | |
US8368754B2 (en) | Video pattern recognition for automating emergency service incident awareness and response | |
EP3675121B1 (en) | Computer-implemented interaction with a user | |
CN109902575B (zh) | 基于无人驾驶车辆的防拐卖方法、装置及相关设备 | |
US9290145B2 (en) | Detecting a transport emergency event and directly enabling emergency services | |
CN111063162A (zh) | 静默报警方法、装置、计算机设备和存储介质 | |
CN110544360B (zh) | 一种列车安全驾驶监测系统及方法 | |
CN108711202B (zh) | 一种基于大数据的交通事故救援系统 | |
CN109359755A (zh) | 事件监测方法、装置、设备和存储介质 | |
CN109192215A (zh) | 一种基于语音的网约车监管方法及系统 | |
KR20170018140A (ko) | 비언어적 음성 인식을 포함하는 응급 상황 진단 방법 및 장치 | |
CN110248133A (zh) | 一种网约车安全监控方法、装置及数据库节点 | |
CN112071309B (zh) | 网约车安全监测装置及系统 | |
CN110580799A (zh) | 一种出租车网约车驾乘人员言行自动预判报警系统 | |
EP4141813A1 (en) | Detection and mitigation of inappropriate behaviors of autonomous vehicle passengers | |
CN108922166B (zh) | 一种基于大数据的交通事故救援方法 | |
CN113096370A (zh) | 一种车辆紧急救援的触发方法及装置 | |
CN112686130B (zh) | 一种智慧渔船监管决策系统 | |
CN110059619B (zh) | 基于图像识别自动报警的方法和装置 | |
CN111860111A (zh) | 车辆行程中的安全监测方法、设备及存储介质 | |
US11735050B2 (en) | Accident reporter | |
CN113393643B (zh) | 异常行为预警方法、装置、车载终端以及介质 | |
CN113592262B (zh) | 一种用于网约车的安全监控方法及系统 | |
WO2021076080A1 (en) | A vehicle owner recognition system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210520 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210810 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20211101 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220704 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220805 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220906 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220913 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20220916 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20220927 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221006 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7160454 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |