JP2022009097A - 判別装置、判別方法およびプログラム - Google Patents
判別装置、判別方法およびプログラム Download PDFInfo
- Publication number
- JP2022009097A JP2022009097A JP2021168171A JP2021168171A JP2022009097A JP 2022009097 A JP2022009097 A JP 2022009097A JP 2021168171 A JP2021168171 A JP 2021168171A JP 2021168171 A JP2021168171 A JP 2021168171A JP 2022009097 A JP2022009097 A JP 2022009097A
- Authority
- JP
- Japan
- Prior art keywords
- work
- worker
- unit
- discrimination
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012850 discrimination method Methods 0.000 title claims abstract description 5
- 238000012545 processing Methods 0.000 claims abstract description 36
- 230000010365 information processing Effects 0.000 claims description 13
- 230000006870 function Effects 0.000 claims description 8
- 238000004519 manufacturing process Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 12
- 238000000034 method Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 238000012706 support-vector machine Methods 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000007637 random forest analysis Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/217—Validation; Performance evaluation; Active pattern learning techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
- G06V40/23—Recognition of whole body movements, e.g. for sport training
- G06V40/25—Recognition of walking or running movements, e.g. gait recognition
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Social Psychology (AREA)
- Psychiatry (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- General Engineering & Computer Science (AREA)
- General Factory Administration (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】作業者が装着したセンサ等から動作情報を取得し、予め学習された判別器を用いて、該動作情報から作業者の動作を認識する認識システムにおいて、判別装置30は、領域受付部40と、領域情報記憶部42と、位置特定部44と、領域特定部46と、判別器記憶部48と、選択部50と、動作情報生成部52と、判別処理部54とを有する。領域特定部は、作業者位置を含む作業領域を特定する。選択部は、人間の動作を表す動作情報から人間の作業内容を判別するための複数の判別器のうち、作業領域に対応付けられた少なくとも1つの判別器を選択する。動作情報生成部は、作業者の動作を表す作業者動作情報を生成する。判別処理部は、選択された少なくとも1つの判別器を用いて、作業者動作情報に基づき、作業者の作業内容を表す作業種別を判別する。
【選択図】図4
Description
図1は、実施形態に係る認識システム10を示す図である。
つぎに、第2実施形態に係る判別装置30について説明する。第2実施形態に係る判別装置30は、第1実施形態と同一の認識システム10に適用される。また、第3実施形態以降も同様である。また、第2実施形態に係る判別装置30は、第1実施形態と略同一の構成および機能を有するので、共通の要素には同一の符号を付けて、相違点を除き詳細な説明を省略する。
つぎに、第3実施形態に係る判別装置30について説明する。第3実施形態に係る判別装置30は、第2実施形態と略同一の構成および機能を有するので、共通の要素には同一の符号を付けて、相違点を除き詳細な説明を省略する。
つぎに、第4実施形態に係る判別装置30について説明する。第4実施形態に係る判別装置30は、第2実施形態と略同一の構成および機能を有するので、共通の要素には同一の符号を付けて、相違点を除き詳細な説明を省略する。
図15は、判別装置30のハードウェア構成を示す図である。判別装置30は、一例として、一般のコンピュータ(情報処理装置)と同様のハードウェア構成により実現される。判別装置30は、所定プログラムを実行することにより機能することができる。
20 製造ライン
22 位置センサ
24 動作センサ
30 判別装置
36 対象範囲
38 部分領域
40 領域受付部
42 領域情報記憶部
44 位置特定部
46 領域特定部
48 判別器記憶部
50 選択部
52 動作情報生成部
54 判別処理部
56 結果記憶部
58 表示制御部
60 対象範囲画像
62 作業者マーク
64 製造装置画像
66 搬送装置画像
70 部分領域画像
72 判別結果画像
74 候補画像
80 領域再構築部
82 動作記憶部
84 入力受付部
86 学習部
90 種別画像
Claims (15)
- 作業者位置を特定する位置特定部と、
前記作業者位置を含む作業領域を特定する領域特定部と、
人間の動作を表す動作情報から人間の作業内容を判別するための複数の判別器のうち、前記作業領域に対応付けられた少なくとも1つの判別器を選択する選択部と、
作業者の動作を表す作業者動作情報を生成する動作情報生成部と、
選択された前記少なくとも1つの判別器を用いて、前記作業者動作情報に基づき、前記作業者の作業内容を表す作業種別を判別する判別処理部と、
を備える判別装置。 - 前記領域特定部は、予め設定された複数の部分領域のうち、前記作業者位置を含む1つの部分領域を前記作業領域として特定する
請求項1に記載の判別装置。 - 前記判別処理部は、前記作業者の作業内容の候補である複数の候補種別と、前記複数の候補種別のそれぞれの信頼度とを算出し、前記信頼度が最も高い1つの候補種別を前記作業種別として出力する
請求項1または2に記載の判別装置。 - 所定時間毎に、
前記位置特定部は、前記作業者位置を特定し、
前記領域特定部は、前記作業領域を特定し、
前記選択部は、前記少なくとも1つの判別器を選択し、
前記動作情報生成部は、前記作業者動作情報を生成し、
前記判別処理部は、前記作業種別を判別する
請求項1から3の何れか1項に記載の判別装置。 - 所定時間毎に判別された前記作業種別、および、前記所定時間毎に特定された前記作業領域を、前記作業者が動作した時刻に対応させて記憶する結果記憶部をさらに備える
請求項2に記載の判別装置。 - 前記作業者の作業内容を判別する対象範囲を表す対象範囲画像、前記対象範囲における前記作業者位置を示す作業者マーク、および、判別した前記作業種別を表す判別結果画像を、表示装置に表示させる表示制御部をさらに備える
請求項1から5の何れか1項に記載の判別装置。 - 前記信頼度が高い順に前記複数の候補種別が並べられた候補画像を表示装置に表示させる表示制御部をさらに備える
請求項3に記載の判別装置。 - 前記作業者の作業内容を判別する対象範囲を表す対象範囲画像、および、前記対象範囲における前記複数の部分領域のそれぞれを表す複数の部分領域画像を、表示装置に表示させる表示制御部をさらに備え、
前記表示制御部は、前記複数の部分領域のそれぞれ毎に、所定作業期間において前記作業者が作業をした作業時間を算出し、算出した作業時間をさらに表す前記複数の部分領域画像を表示させる
請求項5に記載の判別装置。 - 前記作業者の作業内容を判別する対象範囲を表す対象範囲画像、および、前記対象範囲における前記複数の部分領域のそれぞれを表す複数の部分領域画像を、表示装置に表示させる表示制御部をさらに備え、
前記表示制御部は、所定作業期間において、隣接する2つの部分領域における前記作業種別の一致割合が予め定められた値以上である場合、前記2つの部分領域を統合して1つの部分領域として表示する
請求項5に記載の判別装置。 - 所定作業期間において、隣接する2つの部分領域における前記作業種別の一致割合が予め定められた値以上である場合、前記2つの部分領域を統合して1つの部分領域とするように、前記複数の部分領域を再構築する領域再構築部をさらに備える
請求項2に記載の判別装置。 - 生成された前記作業者動作情報および判別された前記作業種別を対応付けて記憶する動作記憶部と、
前記動作記憶部により記憶された前記作業者動作情報および前記作業領域に基づき、前記複数の判別器を訓練する学習部と、
をさらに備える請求項1に記載の判別装置。 - 前記動作記憶部は、特定された前記作業領域を、前記作業種別に対応付けてさらに記憶し、
前記学習部は、前記作業領域に対応付けられた少なくとも1つの判別器を訓練する
請求項11に記載の判別装置。 - 判別された前記作業種別と、前記作業者の作業内容の候補である複数の候補種別とをユーザに提示する表示制御部と、
前記複数の候補種別の中から1つの候補種別の選択を受け付ける入力受付部と、
をさらに備え、
前記判別処理部は、前記入力受付部が前記ユーザに提示した前記作業種別とは異なる候補種別の選択を受け付けた場合、選択された候補種別を新たな作業種別として出力し、
前記学習部は、提示した前記作業種別とは異なる候補種別の選択を受け付けた場合、判別に用いた前記判別器を、前記新たな作業種別を用いて訓練する
請求項12に記載の判別装置。 - 作業者の作業内容を表す作業種別を情報処理装置により判別する判別方法であって、
前記情報処理装置が、作業者位置を特定し、
前記情報処理装置が、前記作業者位置を含む作業領域を特定し、
前記情報処理装置が、人間の動作を表す動作情報から人間の作業内容を判別するための複数の判別器のうち、前記作業領域に対応付けられた少なくとも1つの判別器を選択し、
前記情報処理装置が、前記作業者の動作を表す作業者動作情報を生成し、
前記情報処理装置が、選択された前記少なくとも1つの判別器を用いて、前記作業者動作情報に基づき、前記作業者の作業内容を表す作業種別を判別する
判別方法。 - 作業者の作業内容を表す作業種別を判別する判別装置として情報処理装置を機能させるためのプログラムであって、
前記情報処理装置を、
作業者位置を特定する位置特定部と、
前記作業者位置を含む作業領域を特定する領域特定部と、
人間の動作を表す動作情報から人間の作業内容を判別するための複数の判別器のうち、前記作業領域に対応付けられた少なくとも1つの判別器を選択する選択部と、
前記作業者の動作を表す作業者動作情報を生成する動作情報生成部と、
選択された前記少なくとも1つの判別器を用いて、前記作業者動作情報に基づき、前記作業者の作業内容を表す作業種別を判別する判別処理部として
機能させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021168171A JP7423584B2 (ja) | 2018-02-13 | 2021-10-13 | 判別装置、判別方法およびプログラム |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018023266A JP2019139570A (ja) | 2018-02-13 | 2018-02-13 | 判別装置、判別方法およびプログラム |
JP2021168171A JP7423584B2 (ja) | 2018-02-13 | 2021-10-13 | 判別装置、判別方法およびプログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018023266A Division JP2019139570A (ja) | 2018-02-13 | 2018-02-13 | 判別装置、判別方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022009097A true JP2022009097A (ja) | 2022-01-14 |
JP7423584B2 JP7423584B2 (ja) | 2024-01-29 |
Family
ID=67541672
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018023266A Pending JP2019139570A (ja) | 2018-02-13 | 2018-02-13 | 判別装置、判別方法およびプログラム |
JP2021168171A Active JP7423584B2 (ja) | 2018-02-13 | 2021-10-13 | 判別装置、判別方法およびプログラム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018023266A Pending JP2019139570A (ja) | 2018-02-13 | 2018-02-13 | 判別装置、判別方法およびプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US10902246B2 (ja) |
JP (2) | JP2019139570A (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11321655B2 (en) * | 2019-11-26 | 2022-05-03 | Ncr Corporation | Frictionless and autonomous control processing |
US11354910B2 (en) * | 2019-09-27 | 2022-06-07 | Ncr Corporation | Frictionless authentication and monitoring |
JP7339167B2 (ja) * | 2020-01-17 | 2023-09-05 | 株式会社日立製作所 | 作業支援システム及び作業支援方法 |
JP7299187B2 (ja) * | 2020-03-23 | 2023-06-27 | 株式会社日立製作所 | 作業支援システムおよび作業支援方法 |
JP7493390B2 (ja) | 2020-06-15 | 2024-05-31 | 株式会社日立ハイテク | 監視システム |
JP7456616B2 (ja) | 2020-08-04 | 2024-03-27 | 公立大学法人岩手県立大学 | 学習データ生成システム、推定システム、学習データ生成方法、推定方法、プログラム |
JP7414676B2 (ja) * | 2020-09-14 | 2024-01-16 | 株式会社東芝 | 負荷推定装置、方法およびプログラム |
CN113838133A (zh) * | 2021-09-23 | 2021-12-24 | 上海商汤科技开发有限公司 | 一种状态检测方法、装置、计算机设备和存储介质 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006178583A (ja) * | 2004-12-21 | 2006-07-06 | Yokogawa Electric Corp | 作業者行動記録システム |
JP2007021652A (ja) * | 2005-07-15 | 2007-02-01 | Mikuni Corp | 製品の生産装置および製品の生産方法 |
JP2007328435A (ja) * | 2006-06-06 | 2007-12-20 | Mitsubishi Electric Corp | 移動体行動分析装置 |
JP2009122302A (ja) * | 2007-11-14 | 2009-06-04 | Hitachi Ltd | 作業情報処理装置、プログラム及び作業情報処理方法 |
JP2011014121A (ja) * | 2009-06-30 | 2011-01-20 | E-Pin Optical Industry Co Ltd | 微小電子機械走査の座標検出方法とそれを用いたタッチパネル |
JP2013151063A (ja) * | 2009-05-22 | 2013-08-08 | Toyota Motor East Japan Inc | 作業ロボット支援システム |
JP2014199514A (ja) * | 2013-03-29 | 2014-10-23 | 株式会社クボタ | 作業管理支援装置 |
WO2015098577A1 (ja) * | 2013-12-27 | 2015-07-02 | 日本郵船株式会社 | 作業管理システム |
JP2016015026A (ja) * | 2014-07-02 | 2016-01-28 | 富士通株式会社 | 作業対象確定プログラム、作業対象確定装置及び作業対象確定方法 |
JP2017199153A (ja) * | 2016-04-26 | 2017-11-02 | 株式会社ジェイテクト | 工程計画作成装置 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2582703B2 (ja) * | 1992-05-12 | 1997-02-19 | 松下電器産業株式会社 | 統合型学習システム |
DE69736622T2 (de) * | 1996-07-03 | 2007-09-13 | Hitachi, Ltd. | System zur Bewegungserkennung |
US7421491B2 (en) * | 2002-04-23 | 2008-09-02 | Seer Insight Security K.K. | Method and system for monitoring individual devices in networked environments |
US20040267595A1 (en) * | 2003-06-30 | 2004-12-30 | Idcocumentd, Llc. | Worker and document management system |
JP4460528B2 (ja) * | 2004-12-14 | 2010-05-12 | 本田技研工業株式会社 | 識別対象識別装置およびそれを備えたロボット |
US20060259472A1 (en) * | 2005-05-13 | 2006-11-16 | Macclellan Mary | Automated factory work analyzer |
JP5157929B2 (ja) * | 2009-01-16 | 2013-03-06 | 富士通株式会社 | 作業記録装置、作業記録システムおよび作業記録プログラム |
JPWO2011068184A1 (ja) * | 2009-12-03 | 2013-04-18 | 独立行政法人産業技術総合研究所 | 移動体の測位装置 |
US8554605B2 (en) * | 2011-06-29 | 2013-10-08 | CrowdFlower, Inc. | Evaluating a worker in performing crowd sourced tasks and providing in-task training through programmatically generated test tasks |
US20140244209A1 (en) * | 2013-02-22 | 2014-08-28 | InvenSense, Incorporated | Systems and Methods for Activity Recognition Training |
US8948783B2 (en) * | 2013-06-28 | 2015-02-03 | Facebook, Inc. | User activity tracking system |
JP5506989B1 (ja) * | 2013-07-11 | 2014-05-28 | パナソニック株式会社 | 追跡支援装置、追跡支援システムおよび追跡支援方法 |
JP2017010186A (ja) * | 2015-06-19 | 2017-01-12 | 三菱電機株式会社 | 物流作業分析システム |
-
2018
- 2018-02-13 JP JP2018023266A patent/JP2019139570A/ja active Pending
- 2018-08-14 US US16/102,795 patent/US10902246B2/en active Active
-
2021
- 2021-10-13 JP JP2021168171A patent/JP7423584B2/ja active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006178583A (ja) * | 2004-12-21 | 2006-07-06 | Yokogawa Electric Corp | 作業者行動記録システム |
JP2007021652A (ja) * | 2005-07-15 | 2007-02-01 | Mikuni Corp | 製品の生産装置および製品の生産方法 |
JP2007328435A (ja) * | 2006-06-06 | 2007-12-20 | Mitsubishi Electric Corp | 移動体行動分析装置 |
JP2009122302A (ja) * | 2007-11-14 | 2009-06-04 | Hitachi Ltd | 作業情報処理装置、プログラム及び作業情報処理方法 |
JP2013151063A (ja) * | 2009-05-22 | 2013-08-08 | Toyota Motor East Japan Inc | 作業ロボット支援システム |
JP2011014121A (ja) * | 2009-06-30 | 2011-01-20 | E-Pin Optical Industry Co Ltd | 微小電子機械走査の座標検出方法とそれを用いたタッチパネル |
JP2014199514A (ja) * | 2013-03-29 | 2014-10-23 | 株式会社クボタ | 作業管理支援装置 |
WO2015098577A1 (ja) * | 2013-12-27 | 2015-07-02 | 日本郵船株式会社 | 作業管理システム |
JP2016015026A (ja) * | 2014-07-02 | 2016-01-28 | 富士通株式会社 | 作業対象確定プログラム、作業対象確定装置及び作業対象確定方法 |
JP2017199153A (ja) * | 2016-04-26 | 2017-11-02 | 株式会社ジェイテクト | 工程計画作成装置 |
Also Published As
Publication number | Publication date |
---|---|
US10902246B2 (en) | 2021-01-26 |
JP7423584B2 (ja) | 2024-01-29 |
JP2019139570A (ja) | 2019-08-22 |
US20190251338A1 (en) | 2019-08-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2022009097A (ja) | 判別装置、判別方法およびプログラム | |
KR102377561B1 (ko) | 미러 디스플레이를 이용하여 태권도 동작 코칭 서비스를 제공하는 장치 및 방법 | |
CN109117893A (zh) | 一种基于人体姿态的动作识别方法及装置 | |
JPWO2018154709A1 (ja) | 動作学習装置、技能判別装置および技能判別システム | |
CN108830180A (zh) | 电子考勤方法、装置及电子设备 | |
JP2022029429A5 (ja) | ||
KR20170067787A (ko) | 모션 데이터와 관련된 시스템, 장치 및 방법 | |
JP2017204094A (ja) | 視線特定プログラム、視線特定装置、及び視線特定方法 | |
JP2013134628A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
JP2020091801A (ja) | 作業分析システムおよび作業分析方法 | |
JPWO2017154655A1 (ja) | 群衆種類識別システム、群衆種類識別方法および群衆種類識別プログラム | |
WO2017150073A1 (ja) | 作業動作解析システム,作業動作解析方法及び作業動作解析プログラム | |
CN113597614A (zh) | 图像处理方法和装置、电子设备及存储介质 | |
CN110991292A (zh) | 动作识别比对方法、系统、计算机存储介质和电子装置 | |
JP7338695B2 (ja) | 情報処理システム、情報処理装置、情報処理方法およびプログラム | |
US9911237B1 (en) | Image processing techniques for self-captured images | |
US20210027481A1 (en) | System, method, and computer-readable medium for managing position of target | |
EP4212219A1 (en) | Exercise improvement instruction device, exercise improvement instruction method, and exercise improvement instruction program | |
US9536145B2 (en) | System and method for selecting features for identifying human activities in a human-computer interacting environment | |
JP2017019593A (ja) | 倉庫管理システム及び携帯型装置 | |
JP2021056922A (ja) | 人動作支援システム及びその方法 | |
JP2019146087A (ja) | 情報処理装置、撮像装置の制御方法、コンピュータプログラム、及び記憶媒体 | |
Parvez et al. | Augmentation and Detection of Individual Pose using CUDA | |
EP4246282A1 (en) | Information processing apparatus, information processing system, and information processing method | |
US20230137094A1 (en) | Measurement device, measurement system, measurement method, and computer program product |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211110 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211110 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230104 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230303 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230509 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230725 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20230914 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231121 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231219 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240117 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7423584 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |