CN111263123B - 一种应用于教学中的学生注意力监控系统及监控方法 - Google Patents
一种应用于教学中的学生注意力监控系统及监控方法 Download PDFInfo
- Publication number
- CN111263123B CN111263123B CN202010197813.XA CN202010197813A CN111263123B CN 111263123 B CN111263123 B CN 111263123B CN 202010197813 A CN202010197813 A CN 202010197813A CN 111263123 B CN111263123 B CN 111263123B
- Authority
- CN
- China
- Prior art keywords
- teaching
- information
- student
- monitoring
- sound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种应用于教学中的学生注意力监控系统及监控方法。监控系统包括教学监控主机、教师控制端、学生提醒端、第一监测模块和第二监测模块，所述教学监控主机分别与所述教师控制端、学生提醒端、第一监测模块和第二监测模块连接；所述教学监控主机还连接有教学信息数据库和显示屏。本发明能够实现大范围对教室中学生情况的监控，全面覆盖，实现了更高的监控精度，提升了监控的准确率，同时，将整体监控数据存储在数据库中，便于教师在课后对教学情况进行总结。
Description
技术领域
本发明属于教学监控技术领域，具体涉及一种应用于教学中的学生注意力监控系统及监控方法。
背景技术
在当前的教学中，往往存在一个教室中有较多学生的情况，而在这时，教师可能无法兼顾到每一个学生，从而导致学生可能会出现走神的情况，不能够集中注意力。一方面，由于学生较多，教师可能无法及时发现注意力不集中的学生，另一方面，教师直接在课堂上指出学生不认真听课，可能导致学生情绪变化，影响学生听课效果。
现有技术中已经存在对学生注意力进行监控的研究，然而，现在的技术或方法仍然存在以下问题：一是教室中学生人员较多，无法实现大范围的监控，监控不全面；二是监控精度不高，图像采集装置无法从多个层次进行数据采集；三是监测准确度低，往往存在错误监测的情况，尤其是在教室环境不同的情况下，无法根据具体环境调整相应的监测参数；四是没有对整体监控效果的反馈，无法给教师的课后研究提供信息支持。
发明内容
本发明针对上述现有技术中的不足，提供一种应用于教学中的学生注意力监控系统及监控方法。
本发明提供了一种应用于教学中的学生注意力监控系统，包括教学监控主机、教师控制端、学生提醒端、第一监测模块和第二监测模块，所述教学监控主机分别与所述教师控制端、学生提醒端、第一监测模块和第二监测模块连接；
所述第一监测模块连接有第一摄像头和第一声音采集装置，用于采集教室内整体的图像信息和声音信息；
所述第二监测模块连接有第二摄像头和第二声音采集装置，用于采集教室各个区域的图像信息和各个学生位置的声音信息；
所述教学监控主机还连接有教学信息数据库和显示屏。
优选的，所述第一监测模块包括第一控制器、晃动检测单元和第一声音检测单元，所述第一控制器分别与所述晃动检测单元和第一声音检测单元连接。
优选的，所述第二监测模块包括第二控制器、图像分割单元、人脸朝向识别单元、情绪识别单元和第二声音检测单元，所述第二控制器分别与所述图像分割单元、人脸朝向识别单元、情绪识别单元和第二声音检测单元连接。
优选的，所述显示屏设置在讲台，用于教师查看学生信息。
优选的，所述教学信息数据库中存储有每个学生的数据信息。
同时，本发明还提供了一种应用于教学中的学生注意力监控方法，应用于上述的应用于教学中的学生注意力监控系统，包括如下步骤：
S1：将教室内划分为多个区域，第一摄像头和第一声音采集装置分别用于采集教室内整体的图像信息和声音信息，每个区域内分别有一个第二摄像头和多个第二声音采集装置，每个学生位置对应一个声音采集装置，用于采集区域内图像信息和声音信息；
S2：通过第一摄像头采集教室内的图像信息，通过第一声音采集装置采集教室内的声音信息，分别将图像信息和声音信息发送至第一监测模块；
S3：第一监测模块中的晃动检测单元对图像信息进行处理，当区域内晃动程度达到预设晃动阈值时，将该区域设置为预警区域；第一监测模块中的第一声音检测单元对声音信息进行处理，得到当前时刻音量均值，在教学信息数据库中查找该音量均值对应的第一音量阈值和第二音量阈值，其中，第一音量阈值小于第二音量阈值；将预警区域、第一音量阈值、第二音量阈值发送至教学监控主机；
S4：第二监测模块根据教学监控主机发送的预警区域信息对教室内的不同区域进行监测，对于预警区域按照第一频率对各个学生状态进行扫描，对于非预警区域按照第二频率对各个学生状态进行扫描，其中，第一频率大于第二频率；
S5：通过第二监测模块中的图像分割单元、人脸朝向识别单元和情绪识别单元对第二摄像头采集的图像信息进行处理，通过图像分割单元将图像分割成不同学生对应的图像信息，通过人脸朝向识别单元识别学生的人脸朝向，通过情绪识别单元识别学生情绪并将当前学生情绪与教学信息数据库中的情绪信息对比，根据人脸朝向信息和学生情绪信息判断学生动作行为是否异常；
S6：对第二监测模块中的第二声音检测单元采集的声音信息音量值进行判断，若音量值小于等于第一音量阈值，则学生状态正常，若音量值大于等于第二音量阈值，则学生在进行正常课堂交流，若音量值大于第一音量阈值且小于第二音量阈值，则学生发出异常声音；
S7：若学生动作行为异常或学生发出异常声音，则认为学生注意力不集中，通过教学监控主机反馈至教师控制端，在设置于讲台的显示屏上显示采集到的该学生的图像信息；
S8：教师控制端根据反馈信息对相应的学生发出提醒信息，使学生提醒端进行振动提醒。
优选的，还包括如下步骤：
S9：所述教学监控主机统计课堂上所有学生的注意力信息数据，并将所述注意力信息数据存储在所述教学信息数据库中，教师在课后根据所述教学信息数据库中的数据信息获知教学效果。
优选的，所述的第一监测模块中的第一声音检测单元对声音信息进行处理，得到当前时刻音量均值，具体为：
在一段时间内，等间隔采集多个时间点的音量信息，并计算时间段内采集时间点的音量的均值，该均值作为时间段内最后时刻的音量均值。
优选的，所述的计算时间段内采集时间点的音量的均值，具体为：
对各时间点的音量值进行排序，去掉音量最大值和音量最小值后，计算时间段内采集其他时间点的音量的均值。
优选的，所述的在教学信息数据库中查找该音量均值对应的第一音量阈值和第二音量阈值，其中，音量均值对应的第一音量阈值和第二音量阈值根据教室环境的变化设定。
与现有技术相比，本发明能够实现大范围对教室中学生情况的监控，全面覆盖，通过两个层次的摄像头的图像采集，实现了更高的监控精度，根据教室环境信息的变化，调整相应参数，提升了监控的准确率，同时，将整体监控数据存储在数据库中，便于教师在课后对教学情况进行总结。
附图说明
图1为应用于教学中的学生注意力监控系统结构示意图；
图2为第一监控模块结构示意图；
图3为第二监控模块结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步说明。
实施例一：
如图1所示，本发明提供了一种应用于教学中的学生注意力监控系统，包括教学监控主机、教师控制端、学生提醒端、第一监测模块和第二监测模块，所述教学监控主机分别与所述教师控制端、学生提醒端、第一监测模块和第二监测模块连接；
所述第一监测模块连接有第一摄像头和第一声音采集装置，用于采集教室内整体的图像信息和声音信息；
所述第二监测模块连接有第二摄像头和第二声音采集装置，用于采集教室各个区域的图像信息和各个学生位置的声音信息；
所述教学监控主机还连接有教学信息数据库和显示屏。
所述显示屏设置在讲台，用于教师查看学生信息。
所述教学信息数据库中存储有每个学生的数据信息。
如图2所示，所述第一监测模块包括第一控制器、晃动检测单元和第一声音检测单元，所述第一控制器分别与所述晃动检测单元和第一声音检测单元连接。
如图3所示，所述第二监测模块包括第二控制器、图像分割单元、人脸朝向识别单元、情绪识别单元和第二声音检测单元，所述第二控制器分别与所述图像分割单元、人脸朝向识别单元、情绪识别单元和第二声音检测单元连接。
实施例二：
本发明还提供了一种应用于教学中的学生注意力监控方法，应用于上述的应用于教学中的学生注意力监控系统，包括如下步骤：
S1：将教室内划分为多个区域，第一摄像头和第一声音采集装置分别用于采集教室内整体的图像信息和声音信息，每个区域内分别有一个第二摄像头和多个第二声音采集装置，每个学生位置对应一个声音采集装置，用于采集区域内图像信息和声音信息；
在划分区域时，可以将教室划分为前、中、后三个区域，往往位于教室最后方的区域由于离教师比较远，学生更容易注意力分散，可以对位于教室最后的区域进行更高频率的监测和扫描。
S2：通过第一摄像头采集教室内的图像信息，通过第一声音采集装置采集教室内的声音信息，分别将图像信息和声音信息发送至第一监测模块；
S3：第一监测模块中的晃动检测单元对图像信息进行处理，当区域内晃动程度达到预设晃动阈值时，将该区域设置为预警区域；第一监测模块中的第一声音检测单元对声音信息进行处理，得到当前时刻音量均值，在教学信息数据库中查找该音量均值对应的第一音量阈值和第二音量阈值，其中，第一音量阈值小于第二音量阈值；将预警区域、第一音量阈值、第二音量阈值发送至教学监控主机；
S4：第二监测模块根据教学监控主机发送的预警区域信息对教室内的不同区域进行监测，对于预警区域按照第一频率对各个学生状态进行扫描，对于非预警区域按照第二频率对各个学生状态进行扫描，其中，第一频率大于第二频率；
S5：通过第二监测模块中的图像分割单元、人脸朝向识别单元和情绪识别单元对第二摄像头采集的图像信息进行处理，通过图像分割单元将图像分割成不同学生对应的图像信息，通过人脸朝向识别单元识别学生的人脸朝向，通过情绪识别单元识别学生情绪并将当前学生情绪与教学信息数据库中的情绪信息对比，根据人脸朝向信息和学生情绪信息判断学生动作行为是否异常；
如果学生出现明显的朝向多次变化，则可以认定为学生在左顾右盼，没有认真听课，此时也可以仅通过学生动作行为信息判断学生注意力不集中。
S6：对第二监测模块中的第二声音检测单元采集的声音信息音量值进行判断，若音量值小于等于第一音量阈值，则学生状态正常，若音量值大于等于第二音量阈值，则学生在进行正常课堂交流，若音量值大于第一音量阈值且小于第二音量阈值，则学生发出异常声音；
如果教室处于自习课等较为安静的情况下，可以仅通过声音音量的情况判断学生是否集中注意力，从而通过教学监控主机直接发出提醒信号，而不必通过教师对学生进行提醒，实现无法看管的自习状态。
S7：若学生动作行为异常或学生发出异常声音，则认为学生注意力不集中，通过教学监控主机反馈至教师控制端，在设置于讲台的显示屏上显示采集到的该学生的图像信息；
S8：教师控制端根据反馈信息对相应的学生发出提醒信息，使学生提醒端进行振动提醒。
还包括如下步骤：
S9：所述教学监控主机统计课堂上所有学生的注意力信息数据，并将所述注意力信息数据存储在所述教学信息数据库中，教师在课后根据所述教学信息数据库中的数据信息获知教学效果。
同时，为了实现适应多种教学课堂的情况，可以根据需要设置不同的系统模式，比如：自习模式、课堂讨论模式、提问模式、听课模式、晨读模式等。
所述的第一监测模块中的第一声音检测单元对声音信息进行处理，得到当前时刻音量均值，具体为：
在一段时间内，等间隔采集多个时间点的音量信息，并计算时间段内采集时间点的音量的均值，该均值作为时间段内最后时刻的音量均值。
所述的计算时间段内采集时间点的音量的均值，具体为：
对各时间点的音量值进行排序，去掉音量最大值和音量最小值后，计算时间段内采集其他时间点的音量的均值。
所述的在教学信息数据库中查找该音量均值对应的第一音量阈值和第二音量阈值，其中，音量均值对应的第一音量阈值和第二音量阈值根据教室环境的变化设定。
以上所述仅为本发明的较佳实施例而已，并不以本发明为限制，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。
Claims (10)
1.一种应用于教学中的学生注意力监控方法，包括如下步骤：
S1：将教室内划分为多个区域，第一摄像头和第一声音采集装置分别用于采集教室内整体的图像信息和声音信息，每个区域内分别有一个第二摄像头和多个第二声音采集装置，每个学生位置对应一个声音采集装置，用于采集区域内图像信息和声音信息；
S2：通过第一摄像头采集教室内的图像信息，通过第一声音采集装置采集教室内的声音信息，分别将图像信息和声音信息发送至第一监测模块；
S3：第一监测模块中的晃动检测单元对图像信息进行处理，当区域内晃动程度达到预设晃动阈值时，将该区域设置为预警区域；第一监测模块中的第一声音检测单元对声音信息进行处理，得到当前时刻音量均值，在教学信息数据库中查找该音量均值对应的第一音量阈值和第二音量阈值，其中，第一音量阈值小于第二音量阈值；将预警区域、第一音量阈值、第二音量阈值发送至教学监控主机；
S4：第二监测模块根据教学监控主机发送的预警区域信息对教室内的不同区域进行监测，对于预警区域按照第一频率对各个学生状态进行扫描，对于非预警区域按照第二频率对各个学生状态进行扫描，其中，第一频率大于第二频率；
S5：通过第二监测模块中的图像分割单元、人脸朝向识别单元和情绪识别单元对第二摄像头采集的图像信息进行处理，通过图像分割单元将图像分割成不同学生对应的图像信息，通过人脸朝向识别单元识别学生的人脸朝向，通过情绪识别单元识别学生情绪并将当前学生情绪与教学信息数据库中的情绪信息对比，根据人脸朝向信息和学生情绪信息判断学生动作行为是否异常；
S6：对第二监测模块中的第二声音检测单元采集的声音信息音量值进行判断，若音量值小于等于第一音量阈值，则学生状态正常，若音量值大于等于第二音量阈值，则学生在进行正常课堂交流，若音量值大于第一音量阈值且小于第二音量阈值，则学生发出异常声音；
S7：若学生动作行为异常或学生发出异常声音，则认为学生注意力不集中，通过教学监控主机反馈至教师控制端，在设置于讲台的显示屏上显示采集到的该学生的图像信息；
S8：教师控制端根据反馈信息对相应的学生发出提醒信息，使学生提醒端进行振动提醒。
2.根据权利要求1所述的应用于教学中的学生注意力监控方法，其特征在于，还包括如下步骤：
S9：所述教学监控主机统计课堂上所有学生的注意力信息数据，并将所述注意力信息数据存储在所述教学信息数据库中，教师在课后根据所述教学信息数据库中的数据信息获知教学效果。
3.根据权利要求1所述的应用于教学中的学生注意力监控方法，其特征在于，所述的第一监测模块中的第一声音检测单元对声音信息进行处理，得到当前时刻音量均值，具体为：
在一段时间内，等间隔采集多个时间点的音量信息，并计算时间段内采集时间点的音量的均值，该均值作为时间段内最后时刻的音量均值。
4.根据权利要求3所述的应用于教学中的学生注意力监控方法，其特征在于，所述的计算时间段内采集时间点的音量的均值，具体为：
对各时间点的音量值进行排序，去掉音量最大值和音量最小值后，计算时间段内采集其他时间点的音量的均值。
5.根据权利要求1所述的应用于教学中的学生注意力监控方法，其特征在于，所述的在教学信息数据库中查找该音量均值对应的第一音量阈值和第二音量阈值，其中，音量均值对应的第一音量阈值和第二音量阈值根据教室环境的变化设定。
6.一种应用于教学中的学生注意力监控系统，所述系统用于实现如权利要求1-5任一项所述的方法，其特征在于，包括教学监控主机、教师控制端、学生提醒端、第一监测模块和第二监测模块，所述教学监控主机分别与所述教师控制端、学生提醒端、第一监测模块和第二监测模块连接；
所述第一监测模块连接有第一摄像头和第一声音采集装置，用于采集教室内整体的图像信息和声音信息；所述第二监测模块连接有第二摄像头和第二声音采集装置，用于采集教室各个区域的图像信息和各个学生位置的声音信息；
所述教学监控主机还连接有教学信息数据库和显示屏。
7.根据权利要求6所述的应用于教学中的学生注意力监控系统，其特征在于，所述第一监测模块包括第一控制器、晃动检测单元和第一声音检测单元，所述第一控制器分别与所述晃动检测单元和第一声音检测单元连接。
8.根据权利要求6所述的应用于教学中的学生注意力监控系统，其特征在于，所述第二监测模块包括第二控制器、图像分割单元、人脸朝向识别单元、情绪识别单元和第二声音检测单元，所述第二控制器分别与所述图像分割单元、人脸朝向识别单元、情绪识别单元和第二声音检测单元连接。
9.根据权利要求6所述的应用于教学中的学生注意力监控系统，其特征在于，所述显示屏设置在讲台，用于教师查看学生信息。
10.根据权利要求6所述的应用于教学中的学生注意力监控系统，其特征在于，所述教学信息数据库中存储有每个学生的数据信息。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010197813.XA CN111263123B (zh) | 2020-03-19 | 2020-03-19 | 一种应用于教学中的学生注意力监控系统及监控方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010197813.XA CN111263123B (zh) | 2020-03-19 | 2020-03-19 | 一种应用于教学中的学生注意力监控系统及监控方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111263123A CN111263123A (zh) | 2020-06-09 |
| CN111263123B true CN111263123B (zh) | 2021-04-23 |
Family
ID=70953419
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010197813.XA Active CN111263123B (zh) | 2020-03-19 | 2020-03-19 | 一种应用于教学中的学生注意力监控系统及监控方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111263123B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111899582B (zh) * | 2020-07-29 | 2023-06-23 | 联想(北京)有限公司 | 一种用于网络教学的信息处理方法、装置及电子设备 |
| CN112446590B (zh) * | 2020-11-05 | 2021-08-10 | 重庆第二师范学院 | 一种综合性学生管理系统、方法、介质及终端 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104517102A (zh) * | 2014-12-26 | 2015-04-15 | 华中师范大学 | 学生课堂注意力检测方法及系统 |
| CN107341618A (zh) * | 2017-07-14 | 2017-11-10 | 安徽智星交通科技股份有限公司 | 课堂管理方法及系统 |
| CN107358555A (zh) * | 2017-07-14 | 2017-11-17 | 安徽智星交通科技股份有限公司 | 教学监管方法及系统 |
| CN207166674U (zh) * | 2017-10-17 | 2018-03-30 | 张子健 | 一种晚自习监控系统 |
| CN107958500A (zh) * | 2017-11-24 | 2018-04-24 | 郑州庭淼软件科技有限公司 | 一种用于教学实境信息实时采集的监控系统 |
| CN109523441A (zh) * | 2018-12-20 | 2019-03-26 | 合肥凌极西雅电子科技有限公司 | 一种基于视频识别的教学管理方法和系统 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103514771A (zh) * | 2012-06-26 | 2014-01-15 | 黄庆凯 | 个人手持终端组网的课堂教学通讯网络系统 |
-
2020
- 2020-03-19 CN CN202010197813.XA patent/CN111263123B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104517102A (zh) * | 2014-12-26 | 2015-04-15 | 华中师范大学 | 学生课堂注意力检测方法及系统 |
| CN107341618A (zh) * | 2017-07-14 | 2017-11-10 | 安徽智星交通科技股份有限公司 | 课堂管理方法及系统 |
| CN107358555A (zh) * | 2017-07-14 | 2017-11-17 | 安徽智星交通科技股份有限公司 | 教学监管方法及系统 |
| CN207166674U (zh) * | 2017-10-17 | 2018-03-30 | 张子健 | 一种晚自习监控系统 |
| CN107958500A (zh) * | 2017-11-24 | 2018-04-24 | 郑州庭淼软件科技有限公司 | 一种用于教学实境信息实时采集的监控系统 |
| CN109523441A (zh) * | 2018-12-20 | 2019-03-26 | 合肥凌极西雅电子科技有限公司 | 一种基于视频识别的教学管理方法和系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111263123A (zh) | 2020-06-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6892558B2 (ja) | 教学補助方法およびその方法を採用する教学補助システム | |
| CN111263123B (zh) | 一种应用于教学中的学生注意力监控系统及监控方法 | |
| CN109727167B (zh) | 一种教学辅助系统 | |
| CN109284737A (zh) | 一种用于智慧教室的学生行为分析和识别系统 | |
| CN111652189A (zh) | 一种智能化教学的学生管理系统 | |
| CN107133611B (zh) | 一种课堂学生点头率识别与统计方法及装置 | |
| CN108711152B (zh) | 一种基于ai技术的图像分析方法、装置和用户终端 | |
| CN112866808B (zh) | 一种视频处理方法、装置、电子设备及存储介质 | |
| CN108437999A (zh) | 一种注意力辅助系统 | |
| CN111814587A (zh) | 人体行为检测方法、教师行为检测方法及相关系统和装置 | |
| CN110740298A (zh) | 分布式教室违纪行为检测系统、方法及介质 | |
| CN112464793A (zh) | 一种在线考试作弊行为检测方法、系统和存储介质 | |
| KR102515987B1 (ko) | 학습자의 비대면 온라인수업 참여 탐지 장치 및 방법 | |
| Kielty et al. | Neuromorphic sensing for yawn detection in driver drowsiness | |
| CN111199378B (zh) | 学员管理方法、装置、电子设备及存储介质 | |
| CN111507555B (zh) | 人体状态检测方法、课堂教学质量的评价方法及相关装置 | |
| CN113095208B (zh) | 应用于大学英语教学课堂的注意力观测与提醒系统 | |
| CN115424598A (zh) | 显示屏亮度调整方法、装置及存储介质 | |
| CN115205761A (zh) | 一种事故原因离线智能诊断系统 | |
| CN114842618A (zh) | 一种嵌入式司机行为状态预警方法、装置、车辆及介质 | |
| CN115690867A (zh) | 课堂专注度检测方法、装置、设备及存储介质 | |
| CN113099254A (zh) | 分区域变分辨率的在线教学方法、系统、设备及存储介质 | |
| CN113515976B (zh) | 一种基于多场景视频分析的智能实验考察系统 | |
| CN110765953A (zh) | 一种多媒体教学教师签到监控方法及系统 | |
| CN213458363U (zh) | 一种记录审讯人员违规动作的显控台 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |