CN117173239A - 一种智能设备物品记录寻找的控制方法 - Google Patents
一种智能设备物品记录寻找的控制方法 Download PDFInfo
- Publication number
- CN117173239A CN117173239A CN202311444223.2A CN202311444223A CN117173239A CN 117173239 A CN117173239 A CN 117173239A CN 202311444223 A CN202311444223 A CN 202311444223A CN 117173239 A CN117173239 A CN 117173239A
- Authority
- CN
- China
- Prior art keywords
- article
- module
- matrix
- picture
- analysis module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 32
- 239000011159 matrix material Substances 0.000 claims description 53
- 230000003068 static effect Effects 0.000 claims description 10
- 238000012545 processing Methods 0.000 claims description 8
- 230000001131 transforming effect Effects 0.000 claims description 3
- 230000006872 improvement Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 4
- 235000013305 food Nutrition 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Abstract
本发明公开了一种智能设备物品记录寻找的控制方法,包括摄像装置、控制器和显示模块,控制器包括连接摄像装置的解析模块以及连接解析模块和显示模块的数据库,显示模块上连接有信息输入设备,并通过若干步骤实现自动监测不同的物品在画面内的位置,适用于家庭、零售、物流、仓储等场景。
Description
技术领域
本发明涉及智能设备技术领域,尤其涉及一种智能设备物品记录寻找的控制方法。
背景技术
在部分家庭中,或者是在零售、物流、仓储等行业,通常设置有很多陈列设备用于陈列各种类型的物品。比如,放在家里的书架、展示柜;在商场中,商家通常将物品分类陈列在陈列设备上供顾客选择购买;在仓库中,管理人员通常将物品分类储存在陈列设备上,根据需要进行调取。为了便于管理,商家或管理人员通常需要对陈列设备上陈列的不同物品贴标签标注,并定期通过工作人员进行物品数量的统计。当陈列设备上的某种物品缺货或丢失时,工作人员不能及时发现。并且,这种人工管理的方式,由于工作人员的数量和个人能力等因素的限制,导致管理效率低,运营成本高。
授权公告号为CN111528632B的发明授权专利公开了一种用于陈列物品的智能设备和物品监测的方法,通过测量装置测量承载装置承受的总压力以及承载装置的位姿数据,根据总压力以及位姿变化计算出变化的物品所处位置;但该监测的方法需要每一层都设置有该智能设备,成本较高,安装麻烦。
因此目前需要一种能够记录物品存放的控制方法。
发明内容
鉴于此,本发明的目的在于提供一种智能设备物品记录寻找的控制方法,该控制方法在录入新物品后能自动监测该物品在画面内的位置。
本发明为解决其技术问题而采用的技术方案是提供一种智能设备物品记录寻找的控制方法,包括摄像装置、控制器和显示模块,控制器包括连接摄像装置的解析模块以及连接解析模块和显示模块的数据库,显示模块上连接有信息输入设备;
控制方法包括以下步骤:
S1、摄像装置将整个画面采集并传输至解析模块,解析模块将画面分割成一个个区域,将每个区域内的色块组变换为对应的I矩阵,全部I矩阵形成第一空间编码组并将其存入数据库;
S2、将新物品放置在摄像装置前,静止和旋转新物品,摄像装置录入新物品的画面传输至解析模块,解析模块将新物品与相邻的物品在画面上分割,只截取新物品的画面,并将截取后的全部画面内的彩色色块变换为R矩阵、G矩阵、B矩阵,得出唯一的物品编码存入数据库;
S3、在物品移动时,摄像装置采集物品移动的画面并传至解析模块,解析模块将移动物品与相邻的物品在画面上分割,只截取移动物品的画面,将截取后的画面依次变换为R矩阵、G矩阵、B矩阵并与数据库中已存在的物品编码进行对照,确定该移动物品的物品编码;
S4、确定移动物品的物品编码后,摄像装置持续将画面采集并传输至解析模块,解析模块将画面分割成一个个区域,将每个区域内的色块组变换为对应的I矩阵,全部I矩阵形成第二空间编码组,第二空间编码组对比第一空间编码组,第一空间编码组中出现变化的空间编码记为物品空间编码,当物品静止时,最后一次记录的物品空间编码存入数据库、且与当前的物品编码关联,并将第二空间编码组覆盖第一空间编码组;
S5、用户通过信息输入设备输入物品的物品编码,显示模块读取数据库中的对应该物品编码的物品空间编码,在显示模块中显示该物品空间编码。
作为本发明的进一步改进,步骤S3之后还包括步骤S31:用户通过信息输入设备输入自定义名称至显示模块,显示模块将自定义名称的数据传输至数据库中并与物品编码关联;
步骤S5中,用户通过信息输入设备输入物品的物品编码的方法中用户还可以通过信息输入设备输入物品的自定义名称。
作为本发明的进一步改进,步骤S1中将每个区域内的色块组变换为对应的I矩阵具体方法是将色块组进行灰度处理,每个色块均变换为灰度值,并由灰度值形成I矩阵。
作为本发明的进一步改进,摄像装置包括画面采集模块以及帧率大于画面采集模块的画面录入模块,步骤S2中摄像装置录入新物品的画面传输至解析模块具体是通过画面录入模块录入新物品的画面;
步骤S1、S3和S4中的摄像装置具体为画面采集模块。
作为本发明的进一步改进,解析模块包括静态解析模块和运动解析模块,步骤S1和S4中的解析模块具体为静态解析模块,步骤S2和S3中的解析模块具体为运动解析模块。
作为本发明的进一步改进,的每个色块为一个像素点。
作为本发明的进一步改进,R矩阵内的元素均为红色值、G矩阵内的元素均为绿色值,B矩阵内的元素均为蓝色值。
作为本发明的进一步改进,显示模块为能够处理信号且带有显示功能的显示屏,信息输入设备为键盘和鼠标。
本发明的有益效果至少是能够自动监测不同的物品在画面内的位置,包括但不限于书籍、钥匙、手机、充电器、食物、包装等各种物品,适用于家庭、零售、物流、仓储等场景,在物品因人工或机械失误摆放至错误的位置时,只需要查询对应的物品编码就可以确定是否存在于该场景中或存在于该场景的哪个位置。
附图说明
图1是本发明的模块流程图;
图2是本发明的控制方法步骤图;
图3是本发明画面的色块组灰度处理后变换为I矩阵的示意图;
图4是本发明画面的色块组变换为R矩阵、G矩阵、B矩阵的示意图。
具体实施方式
下面将结合附图,对本发明的技术方案进行清楚、完整地描述。
需要说明,本发明中所有方向性指示(诸如上、下、左、右、前、后…) 仅用于解释在某一特定姿态 (如附图所示) 下各部件之间的相对位置关系、运动情况等,如果该特定姿态发生改变时,则该方向性指示也相应地随之改变。另外,在本发明中涉及“优选”、“次优选”等的描述仅用于描述目的,而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“优选”、“次优选”的特征可以明示或者隐含地包括至少一个该特征。
参照图1-4,本发明提出了一种智能设备物品记录寻找的控制方法,包括摄像装置1、控制器2和显示模块3,控制器2包括连接摄像装置1的解析模块21以及连接解析模块21和显示模块3的数据库22,显示模块3上连接有信息输入设备4;
控制方法包括以下步骤:
S1、摄像装置1将整个画面采集并传输至解析模块21,解析模块21将画面分割成一个个区域,将每个区域内的色块组变换为对应的I矩阵,全部I矩阵形成第一空间编码组并将其存入数据库22;
S2、将新物品放置在摄像装置1前,静止和旋转新物品,摄像装置1录入新物品的画面传输至解析模块21,解析模块21将新物品与相邻的物品在画面上分割,只截取新物品的画面,并将截取后的全部画面内的彩色色块变换为R矩阵、G矩阵、B矩阵,得出唯一的物品编码存入数据库22;
S3、在物品移动时,摄像装置1采集物品移动的画面并传至解析模块21,解析模块21将移动物品与相邻的物品在画面上分割,只截取移动物品的画面,将截取后的画面依次变换为R矩阵、G矩阵、B矩阵并与数据库22中已存在的物品编码进行对照,确定该移动物品的物品编码;
S4、确定移动物品的物品编码后,摄像装置1持续将画面采集并传输至解析模块21,解析模块21将画面分割成一个个区域,将每个区域内的色块组变换为对应的I矩阵,全部I矩阵形成第二空间编码组,第二空间编码组对比第一空间编码组,第一空间编码组中出现变化的空间编码记为物品空间编码,当物品静止时,最后一次记录的物品空间编码存入数据库22、且与当前的物品编码关联,并将第二空间编码组覆盖第一空间编码组;
S5、用户通过信息输入设备4输入物品的物品编码,显示模块3读取数据库22中的对应该物品编码的物品空间编码,在显示模块3中显示该物品空间编码;
采用上述控制方法能够自动监测不同的物品在画面内的位置,包括但不限于书籍、钥匙、手机、充电器、食物、包装等各种物品,适用于家庭、零售、物流、仓储等场景,在物品因人工或机械失误摆放至错误的位置时,只需要查询对应的物品编码就可以确定是否存在于该场景中或存在于该场景的哪个位置;假如机械装置或人体持有物品进行放置时,人体和物品一起移动,可能会将人体和物品一起记为物品空间编码,但由于机械装置或人体最后会放下物品离开画面,因此最后依旧会将物品与机械装置或人体分开,不会导致错判。
作为本发明的进一步改进,步骤S3之后还包括步骤S31:用户通过信息输入设备4输入自定义名称至显示模块3,显示模块3将自定义名称的数据传输至数据库22中并与物品编码关联;
步骤S5中,用户通过信息输入设备4输入物品的物品编码的方法中用户还可以通过信息输入设备4输入物品的自定义名称;自定义名称可以使用户根据自己的需求和使用习惯进行物品的排序。
作为本发明的进一步改进,步骤S1中将每个区域内的色块组变换为对应的I矩阵具体方法是将色块组进行灰度处理,每个色块均变换为灰度值,并由灰度值形成I矩阵;由于场景具有高度和宽度的数据、且步骤S5中可以看出空间编码的主要作用在于用户查找物品时,在显示模块显示该物品空间编码,不需要高精度地进行识别,因此进行灰度处理能将画面简化,并使数据处理的速度大大提高。
作为本发明的进一步改进,摄像装置1包括画面采集模块11以及帧率大于画面采集模块的画面录入模块12,步骤S2中摄像装置1录入新物品的画面传输至解析模块21具体是通过画面录入模块12录入新物品的画面;
步骤S1、S3和S4中的摄像装置1具体为画面采集模块11;在录入新物品时,采用最高的分辨率和帧率进行分析,减少后续识别物品出现误判的情况发生,在不具有相似的物品时,步骤S3的识别过程可以采用近似识别,即R矩阵、G矩阵、B矩阵元素相似时,既可判定为同一物品,从而确定物品的物品编码,提高响应的速度;步骤S1、S3和S4中的摄像装置1具体为画面采集模块11可以节省功率,避免长时间进入高功耗的状态。
作为本发明的进一步改进,解析模块21包括静态解析模块211和运动解析模块212,步骤S1和S4中的解析模块具体为静态解析模块211,步骤S2和S3中的解析模块具体为运动解析模块212;静态解析模块211主要用于处理空间编码,运动解析模块212主要用于物品编码的解析。
作为本发明的进一步改进,每个色块为一个像素点,需要更高的识别精度时可以提高摄像装置1的分辨率。
作为本发明的进一步改进,R矩阵内的元素均为红色值、G矩阵内的元素均为绿色值,B矩阵内的元素均为蓝色值;由此方式变换成的R矩阵、G矩阵、B矩阵,就能使用控制器在数字领域准确地识别物品编码,提高辨别的精度和速度。
作为本发明的进一步改进,显示模块3为能够处理信号且带有显示功能的显示屏,信息输入设备4为键盘和鼠标。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是在本发明的发明构思下,利用本发明说明书及附图内容所作的等效结构变换,或直接或间接运用在其他相关的技术领域均包括在本发明的专利保护范围内。
Claims (8)
1.一种智能设备物品记录寻找的控制方法,其特征在于,包括摄像装置(1)、控制器(2)和显示模块(3),所述控制器(2)包括连接所述摄像装置(1)的解析模块(21)以及连接所述解析模块(21)和显示模块(3)的数据库(22),所述显示模块(3)上连接有信息输入设备(4);
控制方法包括以下步骤:
S1、摄像装置(1)将整个画面采集并传输至解析模块(21),解析模块(21)将画面分割成一个个区域,将每个区域内的色块组变换为对应的I矩阵,全部I矩阵形成第一空间编码组并将其存入所述数据库(22);
S2、将新物品放置在摄像装置(1)前,静止和旋转新物品,摄像装置(1)录入新物品的画面传输至解析模块(21),解析模块(21)将新物品与相邻的物品在画面上分割,只截取新物品的画面,并将截取后的全部画面内的彩色色块变换为R矩阵、G矩阵、B矩阵,得出唯一的物品编码存入所述数据库(22);
S3、在物品移动时,摄像装置(1)采集物品移动的画面并传至解析模块(21),解析模块(21)将移动物品与相邻的物品在画面上分割,只截取移动物品的画面,将截取后的画面依次变换为R矩阵、G矩阵、B矩阵并与数据库(22)中已存在的物品编码进行对照,确定该移动物品的物品编码;
S4、确定移动物品的物品编码后,摄像装置(1)持续将画面采集并传输至解析模块(21),解析模块(21)将画面分割成一个个区域,将每个区域内的色块组变换为对应的I矩阵,全部I矩阵形成第二空间编码组,第二空间编码组对比第一空间编码组,第一空间编码组中出现变化的空间编码记为物品空间编码,当物品静止时,最后一次记录的物品空间编码存入数据库(22)、且与当前的物品编码关联,并将第二空间编码组覆盖第一空间编码组;
S5、用户通过信息输入设备(4)输入物品的物品编码,显示模块(3)读取数据库(22)中的对应该物品编码的物品空间编码,在显示模块(3)中显示该物品空间编码。
2.根据权利要求1所述的一种智能设备物品记录寻找的控制方法,其特征在于,所述步骤S3之后还包括步骤S31:用户通过信息输入设备(4)输入自定义名称至显示模块(3),所述显示模块(3)将自定义名称的数据传输至数据库(22)中并与所述物品编码关联;
所述步骤S5中,用户通过信息输入设备(4)输入物品的物品编码的方法中用户还可以通过信息输入设备(4)输入物品的自定义名称。
3.根据权利要求1所述的一种智能设备物品记录寻找的控制方法,其特征在于,所述步骤S1中将每个区域内的色块组变换为对应的I矩阵具体方法是将色块组进行灰度处理,每个色块均变换为灰度值,并由灰度值形成I矩阵。
4.根据权利要求1所述的一种智能设备物品记录寻找的控制方法,其特征在于,所述摄像装置(1)包括画面采集模块(11)以及帧率大于所述画面采集模块(11)的画面录入模块(12),所述步骤S2中摄像装置(1)录入新物品的画面传输至解析模块(21)具体是通过画面录入模块(12)录入新物品的画面;
所述步骤S1、S3和S4中所述的摄像装置(1)具体为画面采集模块(11)。
5.根据权利要求1所述的一种智能设备物品记录寻找的控制方法,其特征在于,所述解析模块(21)包括静态解析模块(211)和运动解析模块(212),所述步骤S1和S4中所述的解析模块具体为静态解析模块(211),所述步骤S2和S3中所述的解析模块具体为运动解析模块(212)。
6.根据权利要求1所述的一种智能设备物品记录寻找的控制方法,其特征在于,所述的每个色块为一个像素点。
7.根据权利要求1所述的一种智能设备物品记录寻找的控制方法,其特征在于,所述R矩阵内的元素均为红色值、所述G矩阵内的元素均为绿色值,所述B矩阵内的元素均为蓝色值。
8.根据权利要求1所述的一种智能设备物品记录寻找的控制方法,其特征在于,所述显示模块(3)为能够处理信号且带有显示功能的显示屏,所述信息输入设备(4)为键盘和鼠标。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311444223.2A CN117173239B (zh) | 2023-11-02 | 2023-11-02 | 一种智能设备物品记录寻找的控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311444223.2A CN117173239B (zh) | 2023-11-02 | 2023-11-02 | 一种智能设备物品记录寻找的控制方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117173239A true CN117173239A (zh) | 2023-12-05 |
CN117173239B CN117173239B (zh) | 2024-04-02 |
Family
ID=88932105
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311444223.2A Active CN117173239B (zh) | 2023-11-02 | 2023-11-02 | 一种智能设备物品记录寻找的控制方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117173239B (zh) |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150169088A1 (en) * | 2013-12-13 | 2015-06-18 | Industrial Technology Research Institute | Interactive writing device and operating method thereof using adaptive color identification mechanism |
US20160232685A1 (en) * | 2014-06-24 | 2016-08-11 | Pic2Go Ltd | Photo tagging system and method |
CN105858046A (zh) * | 2016-06-06 | 2016-08-17 | 惠州市普源宏业科技有限公司 | 一种智能行吊式仓储系统 |
US20170169294A1 (en) * | 2015-12-11 | 2017-06-15 | Leadot Innovation, Inc. | Method of Tracking Locations of Stored Items |
CN108170781A (zh) * | 2017-12-26 | 2018-06-15 | 中山大学 | 一种家居仓储物品的精确定位方法及系统 |
CN111444360A (zh) * | 2020-03-24 | 2020-07-24 | 广东省品码科技有限公司 | 一种物品管理、定位、分享及实时展示的仓储系统及方法 |
CN112256894A (zh) * | 2020-10-23 | 2021-01-22 | 苏州座头鲸网络科技有限公司 | 一种智慧家庭管理方法 |
CN112327659A (zh) * | 2020-11-26 | 2021-02-05 | 深圳市友进科技有限公司 | 一种基于5g的智能家居控制方法、装置以及系统 |
CN112711673A (zh) * | 2021-01-21 | 2021-04-27 | 孟祥宇 | 一种物品智能找寻系统及方法 |
CN112861753A (zh) * | 2021-02-23 | 2021-05-28 | 河南宏昌科技有限公司 | 一种常用空间内的管理方法 |
CN113947770A (zh) * | 2021-12-13 | 2022-01-18 | 广州微林软件有限公司 | 一种识别物体放置于智能箱柜不同区域的方法 |
CN114339162A (zh) * | 2022-01-04 | 2022-04-12 | 河北化工医药职业技术学院 | 一种智能寻物系统及其应用方法 |
CN114399258A (zh) * | 2022-01-27 | 2022-04-26 | 黄峰 | 一种智能货架、基于智能货架组成的仓储系统及其管理方法 |
-
2023
- 2023-11-02 CN CN202311444223.2A patent/CN117173239B/zh active Active
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150169088A1 (en) * | 2013-12-13 | 2015-06-18 | Industrial Technology Research Institute | Interactive writing device and operating method thereof using adaptive color identification mechanism |
US20160232685A1 (en) * | 2014-06-24 | 2016-08-11 | Pic2Go Ltd | Photo tagging system and method |
US20170169294A1 (en) * | 2015-12-11 | 2017-06-15 | Leadot Innovation, Inc. | Method of Tracking Locations of Stored Items |
CN105858046A (zh) * | 2016-06-06 | 2016-08-17 | 惠州市普源宏业科技有限公司 | 一种智能行吊式仓储系统 |
CN108170781A (zh) * | 2017-12-26 | 2018-06-15 | 中山大学 | 一种家居仓储物品的精确定位方法及系统 |
CN111444360A (zh) * | 2020-03-24 | 2020-07-24 | 广东省品码科技有限公司 | 一种物品管理、定位、分享及实时展示的仓储系统及方法 |
CN112256894A (zh) * | 2020-10-23 | 2021-01-22 | 苏州座头鲸网络科技有限公司 | 一种智慧家庭管理方法 |
CN112327659A (zh) * | 2020-11-26 | 2021-02-05 | 深圳市友进科技有限公司 | 一种基于5g的智能家居控制方法、装置以及系统 |
CN112711673A (zh) * | 2021-01-21 | 2021-04-27 | 孟祥宇 | 一种物品智能找寻系统及方法 |
CN112861753A (zh) * | 2021-02-23 | 2021-05-28 | 河南宏昌科技有限公司 | 一种常用空间内的管理方法 |
CN113947770A (zh) * | 2021-12-13 | 2022-01-18 | 广州微林软件有限公司 | 一种识别物体放置于智能箱柜不同区域的方法 |
CN114339162A (zh) * | 2022-01-04 | 2022-04-12 | 河北化工医药职业技术学院 | 一种智能寻物系统及其应用方法 |
CN114399258A (zh) * | 2022-01-27 | 2022-04-26 | 黄峰 | 一种智能货架、基于智能货架组成的仓储系统及其管理方法 |
Also Published As
Publication number | Publication date |
---|---|
CN117173239B (zh) | 2024-04-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1955998B (zh) | 用于可视化自动标识数据的系统和方法 | |
KR102380255B1 (ko) | 영상 기반 선반 상품 재고 모니터링 시스템 및 방법 | |
CN109446253B (zh) | 数据查询控制方法、装置、计算机设备及存储介质 | |
US20140203079A1 (en) | System and method for calibration and mapping of real-time location data | |
CN109255568A (zh) | 一种基于图像识别的智能仓储系统 | |
CN108345912A (zh) | 一种基于rgbd信息与深度学习的商品快速结算系统 | |
US20220027840A1 (en) | System and Method for Identifying Items and Inventory Thereof | |
US11748787B2 (en) | Analysis method and system for the item on the supermarket shelf | |
US6606636B1 (en) | Method and apparatus for retrieving dynamic images and method of and apparatus for managing images | |
CN115661624A (zh) | 一种货架的数字化方法、装置及电子设备 | |
CN116050992A (zh) | 一种基于图像识别的库存盘点管理系统 | |
CN117173239B (zh) | 一种智能设备物品记录寻找的控制方法 | |
CN114997663A (zh) | 基于资产自动识别的资产风险预警方法及系统 | |
CN113902065B (zh) | 一种基于电子标签的户外机箱运维系统及方法 | |
CN117115569B (zh) | 基于机器学习的物像自动识别分类方法及系统 | |
CN108521296B (zh) | 货品信息识别系统及方法 | |
CN111199410A (zh) | 商品管理方法、装置和智能货架 | |
CN211653688U (zh) | 电子标签称重系统 | |
CN112665698A (zh) | 一种智能电子秤 | |
CN111291834B (zh) | 一种快速生成货架数字陈列图的方法 | |
US11830345B2 (en) | Alert generation algorithm for tracking devices | |
CN116933824A (zh) | 一种基于rfid的智能档案管理方法、系统及档案柜 | |
CN110929097A (zh) | 录像记录显示方法、装置及存储介质 | |
CN115587214A (zh) | 不可信检测结果的分库检索方法、装置、电子设备及介质 | |
CN115099752A (zh) | 一种基于视觉识别的商品盘点方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |