CN207051978U - 一种通过图像识别方式达成室内任务目标位置确定的系统 - Google Patents

一种通过图像识别方式达成室内任务目标位置确定的系统 Download PDF

Info

Publication number
CN207051978U
CN207051978U CN201720678837.0U CN201720678837U CN207051978U CN 207051978 U CN207051978 U CN 207051978U CN 201720678837 U CN201720678837 U CN 201720678837U CN 207051978 U CN207051978 U CN 207051978U
Authority
CN
China
Prior art keywords
module
photo
processing module
camera
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201720678837.0U
Other languages
English (en)
Inventor
潘景良
陈灼
李腾
陈嘉宏
高鲁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ju Da Technology Co Ltd
Original Assignee
Ju Da Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ju Da Technology Co Ltd filed Critical Ju Da Technology Co Ltd
Priority to CN201720678837.0U priority Critical patent/CN207051978U/zh
Application granted granted Critical
Publication of CN207051978U publication Critical patent/CN207051978U/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本实用新型涉及一种通过图像识别方式达成室内任务目标位置确定的系统和方法,该系统包括:内存数据库模块、摄像头和图像处理模块;内存数据库模块中预先储存经特征化识别的室内照片及其元数据,元数据包括位置信息;摄像头对目标地点进行拍摄并将拍摄的目标地点照片传输至图像处理模块,图像处理模块对目标地点照片进行预处理以提取特征、将所提取的特征与内存数据库模块中的内容进行比对,并根据匹配的室内照片及其元数据确定目标地点的位置。

Description

一种通过图像识别方式达成室内任务目标位置确定的系统
技术领域
[0001] 本实用新型涉及室内任务目标位置确定系统领域。具体而言,本实用新型涉及一 种通过图像识别方式达成室内任务目标位置确定的系统和方法。
背景技术
[0002] 市场上现有的可移动的机器人或其它电子设备使用寻迹传感器或红外线或超声 波等方式扫描所在空间的二维或三维地图,通过自主定位和移动或者碰撞反弹变向随机行 走,同时执行其它预设的功能。操作方式以用户通过遥控器或基站远程控制等发出指令来 实现,有些机型可侦测障碍物避障。
[GG03]现有的移动机器人或电子设备因为制图和定位技术不成熟或不精确,在工作过程 中无法完全判断地面和空间的复杂状况,容易出现失去位置与方向的情况,在失去位置的 情况下机器人会卡死、失去坐标、无法回充。某些机型由于不具备定位能力,只能通过碰撞 反弹的物理原理来变向,甚至会造成家居用品或者机器人自身损坏甚至人身伤害、对用户 造成干扰等问题。因为机器人的智能水平不足以真正判断地面与空间状况,导致在移动过 程中会重复行走路线,反复侦测环境,由此电量和时间都浪费在诸多无用功上。 实用新型内容
[0004]本实用新型的室内任务目标位置确定系统可应用于任何一种移动机器人或电子 设备,机器人或设备与用户合作,通过用户提供的图片信息经由本系统的识别比对来确定 机器人或设备移动目标地的位置。由此解决了机器人无法判断地面情况、所处位置和最佳 移动路线的问题。以人眼代替机器人的寻迹传感器。将人的优势与机器人的优势通过本系 统强强联合,弥补现有移动机器人的各种弱点。
[0005] 本实用新型的室内任务目标位置确定系统依赖人机互动,交互性极高,可以提高 机器人的工作效率,同时减轻用户的工作负荷,用人的智能弥补了机器人本身的技术局限。
[0006] 本实用新型涉及一种通过图像识别方式达成室内任务目标位置确定的系统,该系 统包括:内存数据库模块、摄像头和图像处理模块;内存数据库模块中预先储存经特征化识 别的室内照片及其元数据,元数据包括位置信息;摄像头对目标地点进行拍摄并将拍摄的 目标地点照片传输至图像处理模块;图像处理模块对目标地点照片进行预处理以提取特 征,将所提取的特征与内存数据库模块中的内容进行比对,并根据匹配的室内照片及其元 数据确定目标地点的位置。
[0007] 在一个实施方式中,本实用新型的系统还包括无线传输模块,用于通过无线方式 传输照片和/或其元数据。
[0008]在一个实施方式中,本实用新型的系统还包括学习模块,用于对内存数据库模块 中的照片特征进行学习,再将学习后的信息存储回内存数据库模块中。
[0009]在一个实施方式中,本实用新型的系统还包括编码器,用于生成照片的位置信息。 [0010]在一个实施方式中,本实用新型的系统还包括地图定位模块,用于绘制地图和室 内定位。
[0011]在一个实施方式中,本实用新型的系统还包括数据处理模块,用于根据目标地点 的位置并结合地图生成初步路径信息。
[0012]在一个实施方式中,用户还可主动向内存数据库模块中添加照片及其元数据,图 像处理模块可对所添加的照片进行预处理以提取特征,学习模块可对所添加的照片进行学 习。
[0013]在一个实施方式中,本实用新型的系统还包括移动机器人,摄像头、内存数据库模 块、无线传输模块、图像处理模块、数据处理模块、学习模块、编码器和地图定位模块中的一 种或多种可集成于移动机器人内。
[0014]在一个实施方式中,本实用新型的系统还包括智能充电桩,内存数据库模块、无线 传输模块、图像处理模块、数据处理模块、学习模块、编码器和地图定位模块中的一种或多 种可集成于智能充电桩内。
[0015] 本实用新型还涉及一种通过图像识别方式达成室内任务目标位置确定的方法,包 括:
[0016] 摄像头对目标地点进行拍摄并将拍摄的目标地点照片传输至图像处理模块;
[0017]图像处理模块对目标地点照片进行预处理以提取特征;
[0018]将所提取的特征与内存数据库模块中的预先储存的经特征化识别的室内照片进 行比对,内存数据库模块中还储存有室内照片的元数据,元数据包括位置信息;以及 [0019]根据匹配的室内照片及其元数据确定目标地点的位置。
[0020]本实用新型还涉及一种建立室内照片数据库的系统,该系统包括:摄像头、编码 器、距离补偿值计算模块、图像处理模块和内存数据库模块;摄像头用于拍摄照片;编码器 用于记录摄像头的位置;距离补偿值计算模块用于计算距离补偿值;图像处理模块用于处 理照片以提取特征;内存数据库模块用于储存经特征化处理的照片及其位置信息。
[0021 ]本实用新型还涉及一种建立室内照片数据库的方法,包括:
[0022]通过摄像头拍摄照片;
[0023]通过编码器在摄像头进行拍摄时记录摄像头的位置;
[0024]通过距离补偿值计算模块计算距离补偿值;
[0025]基于摄像头的位置和距离补偿值确定照片的位置信息;
[0026]通过图像处理模块处理照片以提取特征;以及
[0027]将特征化的照片及其位置信息储存于内存数据库模块中。
附图说明
[0028]图1是根据本实用新型的一个实施例的通过图像识别方式达成室内任务目标位置 确定的系统的示意图。附图标记如下:手机APP 1、移动机器人或电子设备2、智能充电桩3。 其中移动机器人或电子设备包含摄像头4、无线传输模块5、超声波传感器6、激光传感器7、 编码器8、地图定位模块9、避障模块10、路径规划模块11、运动控制模块12等。智能充电桩包 含无线传输模块13、内存数据模块14、图像处理模块15、机器学习模块16以及数据处理模块 17等。
具体实施方式
[0029]本实用新型涉及一种通过图像识别方式达成室内任务目标位置确定的系统,该系 统包括:内存数据库模块、摄像头和图像处理模块;内存数据库模块中预先储存经特征化识 别的室内照片及其元数据,元数据包括位置信息;摄像头对目标地点进行拍摄并将拍摄的 目标地点照片传输至图像处理模块;图像处理模块对目标地点照片进行预处理以提取特 征,将所提取的特征与内存数据库模块中的内容进行比对,并根据匹配的室内照片及其元 数据确定目标地点的位置。
[0030]元数据还可包括其他任何与照片相关的信息,例如但不限于:摄像头面对的位置、 摄像头面对的方向、角度、光圈、焦距、感光度、白平衡等。
[0031]照片的位置信息基于摄像头拍摄该照片时的位置和距离补偿值确定。距离补偿值 定义为照片拍摄时摄像头与所拍摄物体的距离。在一个实施方式中,该距离补偿值可通过 激光来确定。在另一个实施方式中,该距离补偿值可通过固定拍摄焦距(拍摄距离)来确 定;具体地,摄像头可使用固定焦距拍摄一组照片,随后筛选出清晰的照片,此时可基于焦 距确定清晰的照片中的物体与摄像头的距离。
[0032]在一个实施方式中,图像处理模块中的比对是基于特点模板匹配算法进行的。在 一个具体实施方式中,图像处理模块中的比对是基于尺度不变特征变换(SIFT)算法或加速 稳健特征(SURF)算法进行的。
[0033]在一个实施方式中,本实用新型的系统还包括无线传输模块,用于通过无线方式 传输照片、其元数据和/或其他信息。无线传输模块之间的信号传输方式包括但不限于:蓝 牙、WIFI、ZigBee、红外、超声波、超宽带等,优选的信号传输方式是蓝牙和WII?I。
[OO34]在一个实施方式中,预先储存的经特征化识别的室内照片是通过图像处理模块进 行特征化的。该特征化可基于例如边缘检测算法进行。
[0035]在一个实施方式中,本实用新型的系统还包括学习模块,用于对内存数据库模块 中的照片特征进行学习,再将学习后的信息存储回内存数据库模块中。学习包括计算和矫 正特征权重值,例如通过人工智能神经网络学习方法进行学习。在一个具体实施方式中,学 习是基于卷积神经网络(CNN)进行的。
[0036]在一个实施方式中,本实用新型的系统还包括编码器,编码器可以与摄像头集成 在一起,配置为生成摄像头的实时位置。
[0037]在一个实施方式中,本实用新型的系统还包括地图定位模块,用于绘制地图和室 内定位。在一个具体实施方式中,绘制的地图是二维的室内平面图。在另一个具体实施方式 中,本实用新型的系统还包括距离传感器,用于感知室内的轮廓和/或边缘,地图定位模块 基于距离传感器记录的数据来绘制地图。
[0038]在一个实施方式中,本实用新型的系统还包括数据处理模块,用于根据目标地点 的位置并结合地图生成初步路径信息。
[0039]在一个实施方式中,用户还可主动向内存数据库模块中添加照片及其元数据,图 像处理模块可对所添加的照片进行预处理以提取特征,学习模块可对所添加的照片进行学 习。
[0040]在一个实施方式中,本实用新型的系统还包括移动机器人,摄像头、内存数据库模 块、无线传输模块、图像处理模块、数据处理模块、学习模块、编码器、地图定位模块和距离 传感器中的一种或多种可集成于移动机器人内。移动机器人还可包括用于生成路径的路径 规划模块、用于感知障碍物的传感器、用于提供障碍物信息的避障模块,和/或用于控制移 动机器人移动的运动控制模块。
[0041] 在一个实施方式中,本实用新型的系统还包括智能充电桩,内存数据库模块、无线 传输模块、图像处理模块、数据处理模块、学习模块、编码器、地图定位模块和距离传感器中 的一种或多种可集成于智能充电粧内。智能充电桩可用于容纳功耗大的模块,从而降低其 他设备的功耗。
[0042] 本实用新型还涉及一种通过图像识别方式达成室内任务目标位置确定的方法,包 括:
[0043] 摄像头对目标地点进行拍摄并将拍摄的目标地点照片传输至图像处理模块;
[0044] 图像处理模块对目标地点照片进行预处理以提取特征;
[0045] 将所提取的特征与内存数据库模块中的预先储存的经特征化识别的室内照片进 行比对,内存数据库模块中还储存有室内照片的元数据,元数据包括位置信息;以及 [0046]根据匹配的室内照片及其元数据确定目标地点的位置。
[0047]^本实用新型还涉及一种建立室内照片数据库的系统,该系统包括:摄像头、编码 器、距离补偿值计算模块、图像处理模块和内存数据库模块;摄像头用于拍摄照片;编码器 用于记录摄像头的位置;距离补偿值计算模块用于计算距离补偿值;图像处理模块用于处 理照片以提取特征;内存数据库模块用于储存经特征化处理的照片及其位置信息。
[0048]如前文所述,照片的位置信息基于摄像头拍摄该照片时的位置和距离补偿值确 定。
[0049]本实用新型还涉及一种建立室内照片数据库的方法,包括:
[0050]通过摄像头拍摄照片;
[0051] 通过编码器在摄像头进行拍摄时记录摄像头的位置;
[0052] 通过距离补偿值计算模块计算距离补偿值;
[0053] 基于摄像头的位置和距离补偿值确定照片的位置信息;
[0054]通过图像处理模块处理照片以提取特征;以及
[0055] 将特征化的照片及其位置信息储存于内存数据库模块中。
[0056] 在一个实施方式中,编码器可以与摄像头集成在一起,配置为生成摄像头的实时 位置。
[0057] 如前文所述,距离补偿值定义为照片拍摄时摄像头与所拍摄物体的距离。在一个 ^施方式中,距离补偿值计算模块可通过激光来确定距离补偿值。在另一个实施方式中,距 离补偿值计算模块可通过固定摄像头的拍摄焦距来确定距离补偿值;具体地,摄像头可使 用固定焦距拍摄一组照片,随后距离补偿值计算模块可筛选出清晰的照片并基于焦距确定 清晰的照片中的物体与摄像头的距离。
[00^8]下文根据实施例进一步描述本实用新型。本领域技术人员应理解,以下实施例仅 是示意性的,不构成对本实用新型的限制。
[0059]整套应用系统包括:手机APP 1、移动机器人或电子设备2、智能充电桩3。其中移动 机器人或电子设备包含摄像头4、无线信号模块5、超声波传感器6、激光传感器7、编码器8、 地图定位模块9、避障模块10、路径规划模块11、运动控制模块12等。智能充电桩包含无线信 号模块13、内存数据模块14、图像处理模块15、机器学习模块16以及数据处理模块17等。 [0060]基于图像识别引导移动机器人或电子设备前往用户拍摄的位置。首次使用,移动 机器人或电子设备利用激光、摄像头(例如Visual SLAM)对整个室内布局进行扫描,编码器 记录下机器人运动线位移信息和角位移信息,通过地图定位模块绘制获得地图。同时利用 自身搭载的摄像头进行高速拍照,结合编码器的位置信息,形成大量离散特征照片点,其中 照片位置信息通过编码器数据以及一个距离补偿值(例如固定拍摄距离)获得。移动机器人 或电子设备与智能充电桩通过各自的无线信号模块连接传输数据、地图信息、定位信息、以 及机器人拍下的大量室内特征照片和照片对应的位置信息,经过本地无线网络(WIFI、蓝牙 等)传至智能充电粧,并暂存于其内存数据模块中,之后经由图像处理模块对照片进行特征 化处理(边缘检测算法等),以及机器学习模块对照片特征进行学习,计算、矫正特征权重值 (人工智能神经网络学习方法,例如卷积神经网络(CNN)),再将处理后的信息存回内存数据 库模块中,建立可学习数据库。当用户启动机器人或电子设备的功能任务时,用户可通过手 机APP对需要清扫的位置拍照(或是从需要清扫的位置对周围拍摄等),手机与充电桩无线 通信模块连接(WIFI、蓝牙等),将拍下的照片实时发送至智能充电桩,智能充电桩中的图像 处理分析模块将对此照片进行预处理,提取特征,继而利用基于特征模板匹配算法(如 SIFT,SURF等)与图片库的照片进行快速比对分析,优化过的模板匹配算法,提高了对不同 尺度、角度(旋转)、位置相似图片的匹配准确率。通过匹配的图像及其位置信息确定需要前 往的目标位置,成功匹配后的数据信息由数据处理模块处理,结合地图生成初步路径信息, 并传回机器人路径规划模块,配合避障模块的信息实时规划出最优路径,并将路径信息发 送至机器人内部运动控制模块开始任务。如若图片比对失败,无法确认位置,用户通过APP 可辅助添加位置信息或与机器人交互反馈,帮助机器人深度学习,以提高图片比对成功率。 在APP显示的室内平面地图中手动辅助添加位置信息(与充电桩的相对位置)时,如若此位 置之前有记录照片,APP将同时显示出这个位置所有相关照片集,并将新照片归类至此照 片集,用户手动添加的位置信息与当时拍下的照片共同存储于充电桩内存数据库模块中, 丰富充电桩图片学习数据库。充电桩数据处理模块将在此次任务中依据用户手动输入的位 置信息规划出初步路径,传送至机器人路径规划模块。同时,对于未识别的照片,充电粧中 的智能学习模块利用基于卷积神经网络(CNN)的机器学习算法,或通过用户反馈肯定或否 定的位置信息,对照片特征进行学习,充电桩对室内位置认知的准确度即可不断提高。在机 器人运行过程中,避障模块将根据传感器的数据实时为路径规划模块提供障碍物信息,调 整最优路径。
[0061] 在前面的描述中,己经参考具体示例性实施例描述了本实用新型。然而,本领域技 术人员应理解,可以对本实用新型进行各种修改和变化而不背离本实用新型的范围。

Claims (10)

1. 一种通过图像识别方式达成室内任务目标位置确定的系统,所述系统包括:内存数 据库模块、摄像头和图像处理模块;所述内存数据库模块中预先储存经特征化识别的室内 照片及其元数据,所述元数据包括位置信息;所述摄像头对目标地点进行拍摄并将拍摄的 目标地点照片传输至所述图像处理模块;所述图像处理模块对所述目标地点照片进行预处 理以提取特征,将所提取的特征与所述内存数据库模块中的内容进行比对,并根据匹配的 室内照片及其元数据确定所述目标地点的位置。
2. 根据权利要求1所述的系统,还包括无线传输模块,用于通过无线方式传输照片和/ 或其元数据。
3. 根据权利要求1所述的系统,还包括学习模块,用于对所述内存数据库模块中的照片 特征进行学习,再将学习后的信息存储回所述内存数据库模块中。
4. 根据权利要求1所述的系统,还包括编码器,用于生成照片的位置信息。
5. 根据权利要求1所述的系统,还包括地图定位模块,用于绘制地图和室内定位。
6. 根据权利要求5所述的系统,还包括数据处理模块,用于根据所述目标地点的位置并 结合所述地图生成初步路径信息。
7. 根据权利要求1所述的系统,用户还可主动向所述内存数据库模块中添加照片及其 元数据,所述图像处理模块可对所添加的照片进行预处理以提取特征,学习模块可对所添 加的照片进行学习。
8. 根据权利要求2-7中任一项所述的系统,还包括移动机器人,所述摄像头、所述内存 数据库模块、所述无线传输模块、所述图像处理模块、所述数据处理模块、所述学习模块、所 述编码器和所述地图定位模块中的一种或多种可集成于所述移动机器人内。
9. 根据权利要求2-7中任一项所述的系统,还包括智能充电桩,所述内存数据库模块、 所述无线传输模块、所述图像处理模块、所述数据处理模块、所述学习模块、所述编码器和 所述地图定位模块中的一种或多种可集成于所述智能充电桩内。
10. 一种建立室内照片数据库的系统,所述系统包括:摄像头、编码器、距罔补偿值计算 模块、图像处理模块和内存数据库模块;所述摄像头用于拍摄照片;所述编码器用于记录所 述摄像头的位置;所述距离补偿值计算模块用于计算距离补偿值;所述图像处理模块用于 处理所述照片以提取特征;所述内存数据库模块用于储存经特征化处理的照片及其位置信 >害、。
CN201720678837.0U 2017-06-12 2017-06-12 一种通过图像识别方式达成室内任务目标位置确定的系统 Active CN207051978U (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201720678837.0U CN207051978U (zh) 2017-06-12 2017-06-12 一种通过图像识别方式达成室内任务目标位置确定的系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201720678837.0U CN207051978U (zh) 2017-06-12 2017-06-12 一种通过图像识别方式达成室内任务目标位置确定的系统

Publications (1)

Publication Number Publication Date
CN207051978U true CN207051978U (zh) 2018-02-27

Family

ID=61492663

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201720678837.0U Active CN207051978U (zh) 2017-06-12 2017-06-12 一种通过图像识别方式达成室内任务目标位置确定的系统

Country Status (1)

Country Link
CN (1) CN207051978U (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108416902A (zh) * 2018-02-28 2018-08-17 成都果小美网络科技有限公司 基于差异识别的实时物体识别方法和装置
CN108508890A (zh) * 2018-03-14 2018-09-07 湖南超能机器人技术有限公司 基于红外信号的机器人充电对准技术的信号处理方法
CN108734734A (zh) * 2018-05-18 2018-11-02 中国科学院光电研究院 室内定位方法及系统
CN108845888A (zh) * 2018-05-24 2018-11-20 郑州云海信息技术有限公司 一种基于TensorFlow图像识别诊断内存故障的方法及系统
WO2018228256A1 (zh) * 2017-06-12 2018-12-20 炬大科技有限公司 一种通过图像识别方式达成室内任务目标位置确定的系统和方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018228256A1 (zh) * 2017-06-12 2018-12-20 炬大科技有限公司 一种通过图像识别方式达成室内任务目标位置确定的系统和方法
CN108416902A (zh) * 2018-02-28 2018-08-17 成都果小美网络科技有限公司 基于差异识别的实时物体识别方法和装置
CN108508890A (zh) * 2018-03-14 2018-09-07 湖南超能机器人技术有限公司 基于红外信号的机器人充电对准技术的信号处理方法
CN108734734A (zh) * 2018-05-18 2018-11-02 中国科学院光电研究院 室内定位方法及系统
CN108845888A (zh) * 2018-05-24 2018-11-20 郑州云海信息技术有限公司 一种基于TensorFlow图像识别诊断内存故障的方法及系统

Similar Documents

Publication Publication Date Title
CN207051978U (zh) 一种通过图像识别方式达成室内任务目标位置确定的系统
WO2018228256A1 (zh) 一种通过图像识别方式达成室内任务目标位置确定的系统和方法
CN106780608B (zh) 位姿信息估计方法、装置和可移动设备
CN108885459B (zh) 导航方法、导航系统、移动控制系统及移动机器人
CN100369487C (zh) 物体检测装置、物体检测服务器以及物体检测方法
Fang et al. Adaptive active visual servoing of nonholonomic mobile robots
JP3994950B2 (ja) 環境認識装置及び方法、経路計画装置及び方法、並びにロボット装置
EP1672456B1 (en) Target object detection apparatus and robot provided with the same
JP3996015B2 (ja) 姿勢認識装置及び自律ロボット
Fanello et al. 3D stereo estimation and fully automated learning of eye-hand coordination in humanoid robots
WO2019001237A1 (zh) 一种移动电子设备以及该移动电子设备中的方法
CN206833252U (zh) 一种移动电子设备
WO2018028361A1 (zh) 机器人的充电方法、装置和设备
ES2617307T3 (es) Un procedimiento de localización de un robot en un plano de localización
WO2019232804A1 (zh) 软件更新方法、系统、移动机器人及服务器
WO2019006760A1 (zh) 一种姿态的识别方法、设备及可移动平台
WO2018228258A1 (zh) 一种移动电子设备以及该移动电子设备中的方法
WO2019232803A1 (zh) 移动控制方法、移动机器人及计算机存储介质
WO2018228254A1 (zh) 一种移动电子设备以及该移动电子设备中的方法
Grewal et al. Autonomous wheelchair navigation in unmapped indoor environments
JP4435212B2 (ja) 姿勢認識装置及び自律ロボット
Lee et al. A walking guidance system for the visually impaired
CN107363834B (zh) 一种基于认知地图的机械臂抓取方法
Stefańczyk et al. Localization of essential door features for mobile manipulation
Rastogi et al. Teat detection mechanism using machine learning based vision for smart Automatic Milking Systems

Legal Events

Date Code Title Description
GR01 Patent grant
GR01 Patent grant