CN106096912A - 智能眼镜的人脸识别方法及智能眼镜 - Google Patents

智能眼镜的人脸识别方法及智能眼镜 Download PDF

Info

Publication number
CN106096912A
CN106096912A CN201610393518.5A CN201610393518A CN106096912A CN 106096912 A CN106096912 A CN 106096912A CN 201610393518 A CN201610393518 A CN 201610393518A CN 106096912 A CN106096912 A CN 106096912A
Authority
CN
China
Prior art keywords
intelligent glasses
facial image
image
scene
reminded contents
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610393518.5A
Other languages
English (en)
Other versions
CN106096912B (zh
Inventor
张享隆
陆晖
詹明东
朱朝永
陈星宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Shiyuan Electronics Thecnology Co Ltd
Original Assignee
Guangzhou Shiyuan Electronics Thecnology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Shiyuan Electronics Thecnology Co Ltd filed Critical Guangzhou Shiyuan Electronics Thecnology Co Ltd
Priority to CN201610393518.5A priority Critical patent/CN106096912B/zh
Publication of CN106096912A publication Critical patent/CN106096912A/zh
Application granted granted Critical
Publication of CN106096912B publication Critical patent/CN106096912B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G06Q10/109—Time management, e.g. calendars, reminders, meetings or time accounting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Strategic Management (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种智能眼镜的人脸识别方法，包括：获取用户输入的人脸图像以及提醒内容；检测本智能眼镜是否处于静止状态；在本智能眼镜处于静止状态时，拍摄本智能眼镜前方的场景图像；判断所述场景图像和所述人脸图像是否匹配；在所述视觉场景与所述人脸图像匹配时，输出提醒内容。相应地，本发明还公开了一种智能眼镜。本发明通过拍摄场景图像，判断场景图像与用户设置的人脸图像是否匹配，根据人物的出现对用户作出提醒，在一些需要与他人配合的事务中，能协助用户安排工作，避免事项遗漏。

Description

智能眼镜的人脸识别方法及智能眼镜
技术领域
本发明涉及智能穿戴设备领域，尤其涉及一种智能眼镜的人脸识别方法及智能眼镜。
背景技术
现代社会节奏快而且压力大，无论是学生还是上班人士，如果不能合理地安排学习、工作、出行计划，必定会手忙脚乱，因此各种提醒系统就显得非常重要了，比如闹钟、手机日程管理软件、导航软件等。这些提醒系统基于时间、地点等因素对人们的日程计划、出行过程进行提醒，保证各项进程有效推进。但是日常生活中还有一些事务，是需要其他人物的配合才能完成的，比如前台工作人员工作时，需要根据不同客人完成不同的接待工作，而客户的到达时间并不是事先可预知的，因此闹钟、手机日程管理软件等都不能提醒前台工作人员处理相应的接待工作。即现有的提醒系统并不能提供根据人物的出现而作出相应的提醒。
发明内容
本发明要解决的技术问题在于，提供一种智能眼镜的人脸识别方法，能通过识别人脸对用户作出提醒。
本发明提供一种智能眼镜的人脸识别方法，包括：
获取用户输入的人脸图像以及提醒内容；
检测本智能眼镜是否处于静止状态；
在本智能眼镜处于静止状态时，拍摄本智能眼镜前方的场景图像；
判断所述场景图像和所述人脸图像是否匹配；
在所述视觉场景与所述人脸图像匹配时，输出提醒内容。
实施本发明，具有如下有益效果：
本发明提供的智能眼镜的人脸识别方法，通过拍摄场景图像，判断场景图像与用户设置的人脸图像是否匹配，根据人物的出现对用户作出提醒，在一些需要与他人配合的事务中，能协助用户安排工作，避免事项遗漏。并且通过判断智能眼镜是否静止状态，可以有效排除无须识别的场景，提高人脸识别效率。
进一步地，所述检测本智能眼镜是否处于静止状态，具体包括：
检测所述智能眼镜的三轴加速度值；
通过所述三轴加速度值判断所述智能眼镜是否处于静止状态。
进一步地，所述获取用户输入的人脸图像以及提醒内容，具体为：
通过数据传输端口与手持终端连接，获取用户在手持终端中输入的人脸图像以及提醒内容；
进一步地，所述输出提醒内容，具体为，通过扬声器输出提醒内容或者通过微型投影仪输出提醒内容。
进一步地，所述判断所述场景图像和所述人脸图像是否匹配，具体包括：
识别所述场景图像中的头部轮廓；
比对所述头部轮廓和所述人脸图像是否一致，若是，则确定所述场景图像和所述人脸图像匹配；若否，则确定所述场景图像和所述人脸图像不匹配。
相应地，本发明还提供一种智能眼镜，包括：
输入模块，用于获取用户输入的人脸图像以及提醒内容；
检测模块，用于检测本智能眼镜是否处于静止状态；
拍摄模块，用于在本智能眼镜处于静止状态时，拍摄本智能眼镜前方的场景图像；
匹配模块，用于判断所述场景图像和所述人脸图像是否匹配；
输出模块，用于在所述视觉场景与所述人脸图像匹配时，输出提醒内容。
本发明提供的智能眼镜能执行上述智能眼镜的人脸识别方法，通过拍摄场景图像，判断场景图像与用户设置的人脸图像是否匹配，根据人物的出现对用户作出提醒，在一些需要与他人配合的事务中，能协助用户安排工作，避免事项遗漏。
进一步地，所述检测模块包括：
三轴加速度传感单元，用于检测所述智能眼镜的三轴加速度值；
判断单元，用于通过所述三轴加速度值判断所述智能眼镜是否处于静止状态。
进一步地，所述输入模块为数据传输端口，通过数据传输端口与手持终端连接，获取用户在手持终端中输入的人脸图像以及提醒内容；
进一步地，所述输出模块包括扬声器，通过所述扬声器输出提醒内容；
或者，所述输出模块包括微型投影仪，通过所述微型投影仪输出提醒内容。
进一步地，所述匹配模块包括：
识别单元，用于识别所述场景图像中的头部轮廓；
比对单元，用于比对所述头部轮廓和所述人脸图像是否一致；若是，则确定所述场景图像和所述人脸图像匹配；若否，则确定所述场景图像和所述人脸图像不匹配。
附图说明
图1是本发明提供的智能眼镜的人脸识别方法的实施例的流程图；
图2是本发明提供的智能眼镜的实施例的结构图；
图3是本发明提供的智能眼镜的实施例中检测模块的结构图；
图4是本发明提供的智能眼镜的实施例中匹配模块的结构图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
参见图1，是本发明提供的智能眼镜的人脸识别方法的实施例的流程图，包括：
S1、获取用户输入的人脸图像以及提醒内容；
S2、检测本智能眼镜是否处于静止状态；
S3、在本智能眼镜处于静止状态时，拍摄本智能眼镜前方的场景图像；
S4、判断所述场景图像和所述人脸图像是否匹配；
S5、在所述视觉场景与所述人脸图像匹配时，输出提醒内容。
上述方法中，通过拍摄场景图像，判断场景图像与用户设置的人脸图像是否匹配，根据人物的出现对用户作出提醒，在一些需要与他人配合的事务中，能协助用户安排工作，避免事项遗漏。比如前台工作人员可以预先输入要接待的客人的人脸图像以及提醒内容，提醒内容包括接待时要准备的材料、会议室、客人的喜好等，待客人来到时，智能眼镜输出提醒内容，前台工作人员即可有条不紊地按事先输入的内容工作。或者生活过程中，有事务需要与朋友当面讨论，也可使用本发明实施例提供的方法，避免重要事务在讨论过程中的遗漏。
下面具体说明本发明提供的智能眼镜的人脸识别方法的过程：
所述获取用户输入的人脸图像以及提醒内容，具体为：
通过数据传输端口与手持终端连接，获取用户在手持终端中输入的人脸图像以及提醒内容。数据传输端口可以是串并行接口，也可以是蓝牙接口等无线传输端口。通过数据传输端口与手持终端连接，用户可以在手持终端中的通讯录或者图库中选定照片，作为触发提醒的人脸图像，在手持终端中输入提醒内容。
所述检测本智能眼镜是否处于静止状态，具体包括：
检测所述智能眼镜的三轴加速度值；
通过所述三轴加速度值判断所述智能眼镜是否处于静止状态。
在具体实施时，可以是通过三轴加速度值计算用户的步数，当步数没有变化时可判定智能眼镜处于静止状态；也可以是通过三轴加速度值计算用户头部是否转动，判断智能眼镜是否静止。通过判断智能眼镜是否静止状态，可以有效排除无须识别的场景，提高人脸识别效率。
所述判断所述场景图像和所述人脸图像是否匹配，具体包括：
识别所述场景图像中的头部轮廓；
比对所述头部轮廓和所述人脸图像是否一致，若是，则确定所述场景图像和所述人脸图像匹配；若否，则确定所述场景图像和所述人脸图像不匹配。
在具体实施时，先识别所述场景图像中的头部轮廓，如果有头部轮廓则比对所述头部轮廓和所述人脸图像是否一致，提高识别速度。
在所述视觉场景与所述人脸图像匹配时，输出提醒内容。所述输出提醒内容，具体为，通过扬声器输出提醒内容或者通过微型投影仪输出提醒内容。
相应地，本发明还提供一种智能眼镜，参见图2，是本发明提供的智能眼镜的实施例的结构图，包括：
输入模块1，用于获取用户输入的人脸图像以及提醒内容；
检测模块2，用于检测本智能眼镜是否处于静止状态；
拍摄模块3，用于在本智能眼镜处于静止状态时，拍摄本智能眼镜前方的场景图像；
匹配模块4，用于判断所述场景图像和所述人脸图像是否匹配；
输出模块5，用于在所述视觉场景与所述人脸图像匹配时，输出提醒内容。
本发明提供的智能眼镜能执行上述智能眼镜的人脸识别方法，通过拍摄场景图像，判断场景图像与用户设置的人脸图像是否匹配，根据人物的出现对用户作出提醒，在一些需要与他人配合的事务中，能协助用户安排工作，避免事项遗漏。
参见图3，是本发明提供的智能眼镜的实施例中检测模块的结构图，所述检测模块2包括：
三轴加速度传感单元21，用于检测所述智能眼镜的三轴加速度值；
判断单元22，用于通过所述三轴加速度值判断所述智能眼镜是否处于静止状态。
进一步地，所述输入模块1为数据传输端口，通过数据传输端口与手持终端连接，获取用户在手持终端中输入的人脸图像以及提醒内容；
进一步地，所述输出模块5包括扬声器，通过所述扬声器输出提醒内容；
或者，所述输出模块包括微型投影仪，通过所述微型投影仪输出提醒内容。
参见图4，是本发明提供的智能眼镜的实施例中匹配模块的结构图，匹配模块4包括：
识别单元41，用于识别所述场景图像中的头部轮廓；
比对单元42，用于比对所述头部轮廓和所述人脸图像是否一致；若是，则确定所述场景图像和所述人脸图像匹配；若否，则确定所述场景图像和所述人脸图像不匹配。
本发明提供的智能眼镜，基于人脸识别对用户作出提醒，可在不同场景中发挥有力的效用，比如利用本智能眼镜，用户可以设置还钱给朋友，输入朋友的图像以及“还钱”的提醒内容，见到朋友时即可当面还钱给朋友并确认，提高安全性，进一步地，还可根据这些特殊场景设计开发新的功能，比如增加相应的交易控制模块，用于在所述视觉场景与所述人脸图像匹配时，打开配套的手持终端中的账户交易界面，便于用户还款。
本发明提供的智能眼镜的人脸识别方法及智能眼镜，通过拍摄场景图像，判断场景图像与用户设置的人脸图像是否匹配，根据人物的出现对用户作出提醒，在一些需要与他人配合的事务中，能协助用户安排工作，避免事项遗漏。并且通过判断智能眼镜是否静止状态，可以有效排除无须识别的场景，提高人脸识别效率。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和变形，这些改进和变形也视为本发明的保护范围。

Claims (10)

1.一种智能眼镜的人脸识别方法，其特征在于，包括：
获取用户输入的人脸图像以及提醒内容；
检测本智能眼镜是否处于静止状态；
在本智能眼镜处于静止状态时，拍摄本智能眼镜前方的场景图像；
判断所述场景图像和所述人脸图像是否匹配；
在所述视觉场景与所述人脸图像匹配时，输出提醒内容。
2.如权利要求1所述的智能眼镜的人脸识别方法，其特征在于，所述检测本智能眼镜是否处于静止状态，具体包括：
检测所述智能眼镜的三轴加速度值；
通过所述三轴加速度值判断所述智能眼镜是否处于静止状态。
3.如权利要求1或2所述的智能眼镜的人脸识别方法，其特征在于，所述获取用户输入的人脸图像以及提醒内容，具体为：
通过数据传输端口与手持终端连接，获取用户在手持终端中输入的人脸图像以及提醒内容。
4.如权利要求1或2所述的智能眼镜的人脸识别方法，其特征在于，所述输出提醒内容，具体为，通过扬声器输出提醒内容或者通过微型投影仪输出提醒内容。
5.如权利要求1或2所述的智能眼镜的人脸识别方法，其特征在于，所述判断所述场景图像和所述人脸图像是否匹配，具体包括：
识别所述场景图像中的头部轮廓；
比对所述头部轮廓和所述人脸图像是否一致，若是，则确定所述场景图像和所述人脸图像匹配；若否，则确定所述场景图像和所述人脸图像不匹配。
6.一种智能眼镜，其特征在于，包括：
输入模块，用于获取用户输入的人脸图像以及提醒内容；
检测模块，用于检测本智能眼镜是否处于静止状态；
拍摄模块，用于在本智能眼镜处于静止状态时，拍摄本智能眼镜前方的场景图像；
匹配模块，用于判断所述场景图像和所述人脸图像是否匹配；
输出模块，用于在所述视觉场景与所述人脸图像匹配时，输出提醒内容。
7.如权利要求6所述的智能眼镜，其特征在于，所述检测模块包括：
三轴加速度传感单元，用于检测所述智能眼镜的三轴加速度值；
判断单元，用于通过所述三轴加速度值判断所述智能眼镜是否处于静止状态。
8.如权利要求6或7所述的智能眼镜，其特征在于，所述输入模块为数据传输端口，通过数据传输端口与手持终端连接，获取用户在手持终端中输入的人脸图像以及提醒内容。
9.如权利要求6或7所述的智能眼镜，其特征在于，所述输出模块包括扬声器，通过所述扬声器输出提醒内容；
或者，所述输出模块包括微型投影仪，通过所述微型投影仪输出提醒内容。
10.如权利要求6或7所述的智能眼镜，其特征在于，所述匹配模块包括：
识别单元，用于识别所述场景图像中的头部轮廓；
比对单元，用于比对所述头部轮廓和所述人脸图像是否一致；若是，则确定所述场景图像和所述人脸图像匹配；若否，则确定所述场景图像和所述人脸图像不匹配。
CN201610393518.5A 2016-06-03 2016-06-03 智能眼镜的人脸识别方法及智能眼镜 Active CN106096912B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610393518.5A CN106096912B (zh) 2016-06-03 2016-06-03 智能眼镜的人脸识别方法及智能眼镜

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610393518.5A CN106096912B (zh) 2016-06-03 2016-06-03 智能眼镜的人脸识别方法及智能眼镜

Publications (2)

Publication Number Publication Date
CN106096912A true CN106096912A (zh) 2016-11-09
CN106096912B CN106096912B (zh) 2020-07-28

Family

ID=57447134

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610393518.5A Active CN106096912B (zh) 2016-06-03 2016-06-03 智能眼镜的人脸识别方法及智能眼镜

Country Status (1)

Country Link
CN (1) CN106096912B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109996188A (zh) * 2019-03-29 2019-07-09 广东小天才科技有限公司 一种出行信息异常的提醒方法、装置及设备
CN111813281A (zh) * 2020-05-28 2020-10-23 维沃移动通信有限公司 信息获取方法、信息输出方法、装置和电子设备
CN114445878A (zh) * 2021-12-28 2022-05-06 天翼电信终端有限公司 基于ar眼镜的信息提示方法、装置、设备及存储介质
CN116596620A (zh) * 2023-05-17 2023-08-15 中视觉健康科技(广州)有限责任公司 一种基于智能眼镜匹配设备的眼镜匹配方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8811747B2 (en) * 2011-10-28 2014-08-19 Intellectual Ventures Fund 83 Llc Image recomposition from face detection and facial features
CN104637080A (zh) * 2013-11-07 2015-05-20 深圳先进技术研究院 一种基于人机交互的三维绘图系统及方法
CN204791062U (zh) * 2015-07-17 2015-11-18 天津电眼科技有限公司 一种基于智能眼镜的人脸识别系统
CN105208287A (zh) * 2015-10-15 2015-12-30 广东欧珀移动通信有限公司 一种拍摄方法和装置
CN105528577A (zh) * 2015-12-04 2016-04-27 深圳大学 基于智能眼镜的识别方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8811747B2 (en) * 2011-10-28 2014-08-19 Intellectual Ventures Fund 83 Llc Image recomposition from face detection and facial features
CN104637080A (zh) * 2013-11-07 2015-05-20 深圳先进技术研究院 一种基于人机交互的三维绘图系统及方法
CN204791062U (zh) * 2015-07-17 2015-11-18 天津电眼科技有限公司 一种基于智能眼镜的人脸识别系统
CN105208287A (zh) * 2015-10-15 2015-12-30 广东欧珀移动通信有限公司 一种拍摄方法和装置
CN105528577A (zh) * 2015-12-04 2016-04-27 深圳大学 基于智能眼镜的识别方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109996188A (zh) * 2019-03-29 2019-07-09 广东小天才科技有限公司 一种出行信息异常的提醒方法、装置及设备
CN111813281A (zh) * 2020-05-28 2020-10-23 维沃移动通信有限公司 信息获取方法、信息输出方法、装置和电子设备
CN114445878A (zh) * 2021-12-28 2022-05-06 天翼电信终端有限公司 基于ar眼镜的信息提示方法、装置、设备及存储介质
CN116596620A (zh) * 2023-05-17 2023-08-15 中视觉健康科技(广州)有限责任公司 一种基于智能眼镜匹配设备的眼镜匹配方法
CN116596620B (zh) * 2023-05-17 2023-10-20 中视觉健康科技(广州)有限责任公司 一种基于智能眼镜匹配设备的眼镜匹配方法

Also Published As

Publication number Publication date
CN106096912B (zh) 2020-07-28

Similar Documents

Publication Publication Date Title
US10178291B2 (en) Obtaining information from an environment of a user of a wearable camera system
US11083966B2 (en) Method and apparatus for displaying virtual pet, terminal, and storage medium
CN103218579B (zh) 一种防止屏幕内容被偷窥的方法及其移动终端
CN104159022B (zh) 信息处理设备，部件生成和使用方法，及程序
CN108810248A (zh) 共享概要图像的方法及实现该方法的电子设备
CN104104910B (zh) 一种进行双向实况共享与智能监控的终端及方法
CN109034102A (zh) 人脸活体检测方法、装置、设备及存储介质
CN106096912A (zh) 智能眼镜的人脸识别方法及智能眼镜
CN106982074A (zh) 具有异构显示屏的可穿戴电子设备
CN110019918B (zh) 虚拟宠物的信息展示方法、装置、设备及存储介质
CN109358922A (zh) 一种个性化菜单展示方法、装置、智能终端及存储介质
TW201236959A (en) Control method and device of a simple node transportation system
CN105518579A (zh) 信息处理设备和信息处理方法
CN105637565A (zh) 试穿支援装置以及方法
US8874037B2 (en) Communication system, computer-readable storage medium having stored thereon information processing program, information processing method, information processing apparatus, and information processing system
CN110109252A (zh) 一种智能眼镜及其控制方法
CN109005336A (zh) 一种图像拍摄方法及终端设备
CN110420464B (zh) 虚拟宠物形象参数的确定方法、装置及可读存储介质
US20210264766A1 (en) Anti-lost method and system for wearable terminal and wearable terminal
CN111260899A (zh) 一种智能视觉捕捉提醒ar装置、提醒系统和提醒方法
CN105338183A (zh) 基于移动终端的人物识别提醒系统及方法
CN110427502A (zh) 虚拟内容的显示方法、装置、电子设备及存储介质
CN205080613U (zh) 一种支持二维码扫描的智能接送系统
CN112153292A (zh) 拍摄方法、装置及电子设备
US12072489B2 (en) Social connection through distributed and connected real-world objects

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant