CN114055255B - 一种基于实时点云的大型复杂构件表面打磨路径规划方法 - Google Patents

一种基于实时点云的大型复杂构件表面打磨路径规划方法 Download PDF

Info

Publication number
CN114055255B
CN114055255B CN202111384297.2A CN202111384297A CN114055255B CN 114055255 B CN114055255 B CN 114055255B CN 202111384297 A CN202111384297 A CN 202111384297A CN 114055255 B CN114055255 B CN 114055255B
Authority
CN
China
Prior art keywords
polishing
point
path
point cloud
component
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111384297.2A
Other languages
English (en)
Other versions
CN114055255A (zh
Inventor
陈明松
蔡金亮
蔺永诚
王冠强
曾维栋
张驰洲
彭诚旭
邹奋扬
李凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Central South University
Original Assignee
Central South University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Central South University filed Critical Central South University
Priority to CN202111384297.2A priority Critical patent/CN114055255B/zh
Publication of CN114055255A publication Critical patent/CN114055255A/zh
Application granted granted Critical
Publication of CN114055255B publication Critical patent/CN114055255B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B24GRINDING; POLISHING
    • B24BMACHINES, DEVICES, OR PROCESSES FOR GRINDING OR POLISHING; DRESSING OR CONDITIONING OF ABRADING SURFACES; FEEDING OF GRINDING, POLISHING, OR LAPPING AGENTS
    • B24B1/00Processes of grinding or polishing; Use of auxiliary equipment in connection with such processes

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Finish Polishing, Edge Sharpening, And Grinding By Specific Grinding Devices (AREA)

Abstract

本发明公开了一种基于实时点云的大型复杂构件表面打磨路径规划方法,该方法包括:移动底盘自主识别并移动到加工工位;在当前工位采集点云,剔除环境噪声和背景点云,提取出待打磨构件点云;建立材料打磨去除模型,计算出接触面上的打磨深度分布函数;沿曲率变化较大的方向截取第一条打磨路径,再依次计算下一条打磨路径各点的候选迭代点,从中取最短的路径作为下一条打磨路径;根据路径点云生成机器人末端工具运动轨迹,发送给打磨工具控制系统执行;移动底盘自主识别并移动到下一工位,从而完成构件整体打磨任务。本发明消除了现有技术的点云重建累积误差和轨迹重定位误差,显著提高了打磨的自主性和打磨效果的均匀性。

Description

一种基于实时点云的大型复杂构件表面打磨路径规划方法
技术领域
本发明涉及工业机器人加工领域,具体涉及一种基于实时点云的大型复杂构件表面打磨路径规划方法。
背景技术
大型复杂曲面构件在航空航天、能源和交通领域有着重要应用,如大型蜗轮叶片、飞机外壳、风电叶片、高铁车身等,这些大型曲面都对表面曲率和打磨质量有着较高要求,但其外形庞大、曲面复杂、装夹变形等问题给表面打磨带来了严峻挑战。
机器人由于其灵活度高、自主性强、环境适应性强等特点被广泛应用于构件表面打磨领域,但现有的加工策略和轨迹规划方法都难以满足大型复杂曲面打磨要求。
中国发明专利CN108445834A介绍了一种针对大型复杂构件的机器人加工轨迹离线规划方法,其利用构件CAD模型,一次完成整体表面的机器人加工轨迹规划,一方面没有考虑大型构件实际装夹变形误差,另一方面没有考虑机器人实际执行时如何确定所规划轨迹在构件表面的位置,其可实现性差,人工干预大,加工效率低。
中国发明专利CN110039538B提出了一种基于点云重建的大型复杂构件加工轨迹规划方法,其利用采集的点云数据重建构件三维模型,再沿重建模型表面用切片法获取加工轨迹。该方法只用平行的切平面截取轨迹,并未考虑曲面的曲率和加工轨迹间距等对加工质量有直接影响的因素,其加工质量无法保证。此外,中国发明专利CN108445834A及CN110039538B均只涉及大型复杂构件加工轨迹规划方法,并未对其在打磨场景下应用方法进行介绍。
中国发明专利CN111055293A介绍了一种基于曲面自适应的工业机器人高精度恒力打磨方法,该方法采集工件点云信息构建STL模型,用等间距的特征线投影到模型表面从而规划出打磨轨迹,但其特征线是固定间距,没有考虑由于曲面曲率变化导致的相邻打磨轨迹间距动态变化的情况,且固定间距无法适应工件和打磨工具变换的情况,同时该方法只适用于小型工件,其并未针对大型构件打磨提出方案。
因此,为实现大型复杂构件的高效和高质量打磨,急需发明一种能够自主完成高精度打磨的方法,利用该方法既能消除传统点云拼接方法的累积误差,又能优化打磨轨迹从而提高打磨效果。
发明内容
为了克服已有的技术缺陷,本发明提出了一种基于实时点云的大型构件表面自主打磨路径规划方法,其所需点云采集设备价格低廉,自主性高,场景适应性强,且消除了重复定位打磨轨迹产生的误差,大大提高了打磨效率与质量。
本发明解决其技术问题所采用的技术方案是:
一种基于实时点云的大型复杂构件表面打磨路径规划方法,其特征在于,包括以下步骤:
S1移动底盘上安装有定位感知传感器,通过SLAM算法实时更新移动底盘与世界坐标系的变换,再通过手眼标定和工具坐标系标定建立机械臂基座、三维点云数据获取设备、打磨工具和移动底盘之间的坐标系变换,实现整套移动打磨系统和大型构件间的实时定位;
S2利用三维点云数据获取设备获取的点云数据计算与构件的距离,控制移动底盘到达构件前方合适加工位置处,此位置根据机械臂加工范围确定,到达位置后固定移动底盘不动;
S3三维点云数据获取设备采集当前工位的点云数据,通过点云预处理分离出构件点云,在构件点云上确定待打磨区域;
S4建立打磨工具与构件间的材料打磨去除模型;
S5基于材料打磨去除模型在待打磨构件点云上规划打磨路径并优化打磨路径间距;
S6估计每个打磨路径点处的内法向量,基于打磨路径点和对应的内法向量完成机械臂末端打磨工具轨迹规划,发送该轨迹给机械臂执行;
S7机械臂执行完当前工位的打磨动作后,解锁底盘,底盘自主移动到下一固定工位,重复步骤S3至S7以完成整体构件的打磨任务。
进一步的,所述步骤S3具体包括以下步骤:
S31控制装载三维点云数据获取设备的机械臂运动至构件表面合适距离处采集点云数据;
S32剔除点云数据中由于灰尘和反光等原因产生的离群点;
S33分离出构件点云数据,去除背景环境等无关点云数据;
S34对获得的曲面点云进行连续光滑处理;
S35识别出未打磨区域,确定构件点云的待打磨区域。
进一步的,所述步骤S5具体包括以下步骤:
S51计算待打磨构件点云的质心和最小外包围盒,通过质心沿垂直于最小外包围盒最大面的方向每隔45度构建平面,共构建4个平面,该4平面与待打磨构件点云相交得4条交于一点的点云路径,分别计算这四条路径上的曲率方差,取方差最大的路径标记为首条打磨路径,定义首条打磨路径为第i条路径(i=1),并作为当前路径;
S52对当前路径进行均分获得路径点n,取当前路径起始点为参照点,通过参照点,以该点的切线方向为法向量构建一个截平面,该平面与待打磨构件点云相交得参照路径;
S53以参照点为起点,沿参照路径取距离为一定倍数打磨工具直径的坐标点作为迭代点;
S54分别以参照点和迭代点作为打磨工具中心点,根据材料去除模型计算两中心点周围的打磨深度分布;
S55计算参照点和迭代点连线上的深度值方差,若该方差满足工艺要求,则将该迭代点记录为候选迭代点,再将迭代点往参照点方向移动一定步长得新迭代点,重新计算参照点和新迭代点连线上的深度值方差,重复移动更新迭代点直至迭代点和参照点重合,此时可得多个满足工艺要求的候选迭代点,定义为候选迭代点集合i1
S56依次将当前路径上所有路径点作为参照点代入步骤S52,并执行S52-S56获得第i条打磨路径上候选迭代点集合{i1,i2…in};
S57在第i条打磨路径上候选迭代点集合中,计算一条最短的路径,取该路径作为第i+1条打磨路径;
S58将第i+1,i+2…i+m条打磨路径作为当前路径执行S52-S58,直至待打磨区域被规划完成。
本发明的有益效果为:
1、“移动→固定→扫描→规划→打磨→移动”的循环加工方法,实现了实时点云采集及打磨路径在线规划,消除了大型构件模型重建时的拼接累积误差和执行时的加工轨迹重定位误差,极大地提高了大型构件表面的打磨精度。
2、改进的曲面打磨路径规划方法,优化了相邻路径间的打磨间距,提高了曲面打磨均匀程度,保证了打磨质量。
3、自主移动底盘控制打磨作业的方法,能够适应不同的加工环境,提高了打磨作业的自动化程度,提高了大型构件打磨效率。
附图说明
图1是基于实时点云的大型复杂构件表面打磨路径规划方法的整体流程图;
图2是规划打磨路径并优化打磨路径间距的流程图;
图3是移动底盘自主切换工位示意图。
具体实施方式
为进一步理解本发明,下面结合附图和实施例对本发明做进一步说明,但是需要说明的是,本发明要求保护的范围并不局限于实施例表述的范围。
图1是按照本发明的实施例所构建的基于实时点云的大型复杂构件表面打磨路径规划方法的整体流程图,其包括以下步骤:
S1移动底盘上安装有激光雷达、IMU等定位感知传感器,用SLAM算法实时更新移动底盘和世界坐标系的变换,把机械臂基座固定在移动地盘上,并在其末端安装恒力打磨工具和深度相机,通过手眼标定和工具坐标系标定建立机械臂基座、深度相机、恒力打磨工具和移动底盘之间的坐标系变换,实现整套移动打磨系统和大型构件间的实时定位。
S2利用深度相机获取的点云数据计算机械臂末端与构件的距离,控制移动底盘缓慢靠近构件,直至机械臂末端到达构件前方合适加工位置处,此位置根据机械臂加工范围确定,到达位置后锁紧移动底盘,使其不会发生移动。
S3用深度相机采集当前工位的点云数据,通过点云预处理消除现场环境产生的无关点云,从而分离出构件点云,然后在构件点云上确定待打磨区域,具体包括以下步骤:
S31控制机械臂运动,判断深度相机与构件表面距离,在距表面1.5米处采集点云数据,再通过手眼坐标变换把点云转换到世界坐标系下;
S32用离群点检测算法处理点云,剔除点云中由于现场环境的灰尘或反光等原因产生的离群点;
S33点云数据中不仅有构件点云,还有墙壁地面等连续的背景点云,计算各部分点云与深度相机的相对位置,保留深度相机采集时视野正前方的连续点云,删除其他点云块,从而分离出构件点云数据,去除背景环境等无关点云;
S34深度相机传感器本身存在精度问题,此问题会导致构件点云数据表面不光滑,可能产生波浪形的噪声,用移动最小二乘法处理构件点云,形成连续光滑的曲面构件点云;
S35深度相机不仅有点云数据,还有与点云数据相互映射的图像数据,打磨前后构件表面颜色会发生变化,据此特征在图像数据中识别出未打磨区域,再将其映射到构件点云中,从而确定构件点云的待打磨区域。
S4建立恒力打磨工具与构件间的材料打磨去除模型,具体包括以下步骤:
S41根据Hertizian接触理论计算出接触面压力分布与构件表面曲率间的函数,建立恒力打磨工具与构件间的压力分布模型;
S42基于Preston假设,根据压力分布模型计算出打磨工具与构件接触面上的打磨深度分布函数,建立材料打磨去除模型。
S5图2是基于材料打磨去除模型,在待打磨构件点云上规划打磨路径并优化打磨路径间距的流程图,具体包括以下步骤:
S51计算待打磨构件点云的质心和最小外包围盒,通过质心沿垂直于最小外包围盒最大面的方向每隔45度构建平面,共构建4个平面,该4平面与待打磨构件点云相交得4条交于一点的点云路径,分别计算这四条路径上的曲率方差,取方差最大的路径标记为首条打磨路径,定义首条打磨路径为第i条路径(i=1),并作为当前路径;
S52对当前路径进行均分获得路径点n,取当前路径起始点为参照点,通过参照点,以该点的切线方向为法向量构建一个截平面,该平面与待打磨构件点云相交得参照路径;
S53以参照点为起点,沿参照路径取距离为一定倍数打磨工具直径的坐标点作为迭代点;
S54分别以参照点和迭代点作为恒力打磨工具中心点,根据材料去除模型计算两中心点周围的打磨深度分布;
S55计算参照点和迭代点连线上的深度值方差,若该方差满足工艺要求,则将该迭代点记录为候选迭代点,再将迭代点往参照点方向移动一定步长得新迭代点,重新计算参照点和新迭代点连线上的深度值方差,重复移动更新迭代点直至迭代点和参照点重合,此时可得多个满足工艺要求的候选迭代点,定义为候选迭代点集合i1
S56依次将当前路径上所有路径点作为参照点代入步骤S52,并执行S52-S56获得第i条打磨路径上候选迭代点集合{i1,i2…in};
S57在第i条打磨路径上候选迭代点集合中,计算一条最短的路径,取该路径作为第i+1条打磨路径;
S58分别将第i+1,i+2…i+m条打磨路径作为当前路径执行S52-S58,直至待打磨区域被规划完成。
S6根据每个路径点坐标及其领域点云,用最小二乘法估计每一路径点处的法向量,估计出的法向量有两个方向,取方向与从深度相机到路径点这一方向相同的法向量作为内法向量,用路径点坐标作为恒力打磨工具的位置约束,该点的内法向量作为恒力打磨工具的z轴约束,取路径的切线方向作为恒力打磨工具的x轴约束,取z轴约束与x轴约束叉乘的向量作为恒力打磨工具的y轴约束,至此已经完全确定恒力打磨工具的六个自由度约束,在对每一路径点确定六个自由度约束后即生成机械臂末端打磨轨迹,发送该轨迹给机械臂执行。
S7图3是移动打磨系统切换工位打磨示意图,机械臂执行完当前工位的打磨动作后,解锁底盘,底盘自主移动到下一固定工位,重复步骤S3至S7以完成整体构件的打磨任务。
本发明所述的基于实时点云的大型复杂构件表面打磨路径规划方法,通过移动底盘的自主导航增加了系统的自主性和灵活性,能够适应不同的加工环境,采用划分工位即时加工的方式消除了重建模型误差和轨迹重定位误差,基于打磨深度分布模型优化路径间距,显著提高了相邻路径间打磨深度的均匀性,提供了一套高效精准的大型复杂构件表面打磨方案。
上面结合附图对本发明的实施例进行了描述,但本发明不局限于上述具体的实施方式,上述的具体实施方式仅是示例性的,不是局限性的,任何不超过本发明权利要求的发明创造,均在本发明的保护范围之内。

Claims (3)

1.一种基于实时点云的大型复杂构件表面打磨路径规划方法,其特征在于,包括以下步骤:
S1移动底盘上安装有定位感知传感器,通过SLAM算法实时更新移动底盘与世界坐标系的变换,再通过手眼标定和工具坐标系标定建立机械臂基座、三维点云数据获取设备、打磨工具和移动底盘之间的坐标系变换,实现整套移动打磨系统和大型构件间的实时定位;
S2利用三维点云数据获取设备获取的点云数据计算与构件的距离,控制移动底盘到达构件前方合适加工位置处,此位置根据机械臂加工范围确定,到达位置后固定移动底盘不动;
S3三维点云数据获取设备采集当前工位的点云数据,通过点云预处理分离出构件点云,在构件点云上确定待打磨区域;
S4建立打磨工具与构件间的材料打磨去除模型;
S5基于材料打磨去除模型在待打磨构件点云上规划打磨路径并优化打磨路径间距;
S6估计每个打磨路径点处的内法向量,基于打磨路径点和对应的内法向量完成机械臂末端打磨工具轨迹规划,发送该轨迹给机械臂执行;
S7机械臂执行完当前工位的打磨动作后,解锁底盘,底盘自主移动到下一固定工位,重复步骤S3至S7以完成整体构件的打磨任务。
2.根据权利要求1所述的一种基于实时点云的大型复杂构件表面打磨路径规划方法,其特征在于,步骤S3包括以下步骤:
S31控制装载三维点云数据获取设备的机械臂运动至构件表面合适距离处采集点云数据;
S32剔除点云数据中由于灰尘和反光而产生的离群点;
S33分离出构件点云数据,去除无关的背景环境点云数据;
S34对获得的曲面点云进行连续光滑处理;
S35识别出未打磨区域,确定构件点云的待打磨区域。
3.根据权利要求1所述的一种基于实时点云的大型复杂构件表面打磨路径规划方法,其特征在于,步骤S5包括以下步骤:
S51计算待打磨构件点云的质心和最小外包围盒,通过质心沿垂直于最小外包围盒最大面的方向每隔45度构建平面,共构建4个平面,该4个平面与待打磨构件点云相交得4条交于一点的点云路径,分别计算这四条路径上的曲率方差,取方差最大的路径标记为首条打磨路径,定义首条打磨路径为第i条路径(i=1),并作为当前路径;
S52对当前路径进行均分获得路径点n,取当前路径起始点为参照点,通过参照点,以该点的切线方向为法向量构建一个截平面,该平面与待打磨构件点云相交得参照路径;
S53以参照点为起点,沿参照路径取距离为一定倍数打磨工具直径的坐标点作为迭代点;
S54分别以参照点和迭代点作为打磨工具中心点,根据材料去除模型计算两中心点周围的打磨深度分布;
S55计算参照点和迭代点连线上的深度值方差,若该方差满足工艺要求,则将该迭代点记录为候选迭代点,再将迭代点往参照点方向移动一定步长得新迭代点,重新计算参照点和新迭代点连线上的深度值方差,重复移动更新迭代点直至迭代点和参照点重合,此时可得多个满足工艺要求的候选迭代点,定义为候选迭代点集合i1
S56依次将当前路径上所有路径点作为参照点代入步骤S52,并执行S52-S56获得第i条打磨路径上候选迭代点集合{i1,i2…in};
S57在第i条打磨路径上候选迭代点集合中,计算一条最短的路径,取该路径作为第i+1条打磨路径;
S58将第i+1,i+2…i+m条打磨路径作为当前路径执行S52-S58,直至待打磨区域被规划完成。
CN202111384297.2A 2021-11-18 2021-11-18 一种基于实时点云的大型复杂构件表面打磨路径规划方法 Active CN114055255B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111384297.2A CN114055255B (zh) 2021-11-18 2021-11-18 一种基于实时点云的大型复杂构件表面打磨路径规划方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111384297.2A CN114055255B (zh) 2021-11-18 2021-11-18 一种基于实时点云的大型复杂构件表面打磨路径规划方法

Publications (2)

Publication Number Publication Date
CN114055255A CN114055255A (zh) 2022-02-18
CN114055255B true CN114055255B (zh) 2022-11-15

Family

ID=80278638

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111384297.2A Active CN114055255B (zh) 2021-11-18 2021-11-18 一种基于实时点云的大型复杂构件表面打磨路径规划方法

Country Status (1)

Country Link
CN (1) CN114055255B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114894133A (zh) * 2022-04-01 2022-08-12 上海钧控机器人有限公司 一种工具头非接触姿态测量与控制方法
CN114434265B (zh) * 2022-04-08 2022-07-08 广东熙瑞智能科技有限公司 用于头盔制造的打磨线路设定与控制方法
CN114888644A (zh) * 2022-05-11 2022-08-12 上海交通大学 面向机器人恒力磨抛工艺的工具轨迹离线编程方法及系统
CN115805503B (zh) * 2023-01-29 2023-06-06 江苏集萃清联智控科技有限公司 一种智能打磨机器人自动打磨决策规划装置及方法
CN117011471B (zh) * 2023-09-19 2024-08-09 齐鲁工业大学(山东省科学院) 一种基于点云的实时全覆盖打磨路径规划方法
CN117408049B (zh) * 2023-10-19 2024-04-09 无锡斯帝尔科技有限公司 一种基于3d视觉的打磨路径规划方法
CN117140354B (zh) * 2023-10-31 2024-01-05 雅安成建工业化建筑有限公司 一种基于轨迹优化的用于建筑用金属制品的打磨系统

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014071297A1 (en) * 2012-11-04 2014-05-08 Deming Systems Llc Robotic surface treatment device
CN107127755B (zh) * 2017-05-12 2023-12-08 华南理工大学 一种三维点云的实时采集装置及机器人打磨轨迹规划方法
EP3434424A1 (de) * 2017-07-27 2019-01-30 Convergent Information Technologies GmbH Effiziente programmierung von robotern für die bearbeitung von werkstücken mit verschiedenen varianten
CN112757057A (zh) * 2021-01-19 2021-05-07 武汉海默机器人有限公司 融合视觉深度分析的智能免人工示教打磨抛光方法及系统
CN112947309B (zh) * 2021-01-26 2021-11-16 无锡中车时代智能装备有限公司 基于等残高端面的机器人打磨路径规划方法及设备
CN113376649A (zh) * 2021-06-30 2021-09-10 华中科技大学 基于全局粗略扫描成像后的机器人自动局部扫描规划方法

Also Published As

Publication number Publication date
CN114055255A (zh) 2022-02-18

Similar Documents

Publication Publication Date Title
CN114055255B (zh) 一种基于实时点云的大型复杂构件表面打磨路径规划方法
CN110091333B (zh) 复杂曲面表面焊缝特征识别和自动磨抛的装置及方法
CN109623656B (zh) 基于厚度在线检测的移动式双机器人协同打磨装置及方法
CN107127755B (zh) 一种三维点云的实时采集装置及机器人打磨轨迹规划方法
CN105354880B (zh) 一种基于线激光扫描的喷砂机器人自动路径生成方法
CN105868498B (zh) 基于扫描线点云的蒙皮边界特征重构方法
CN103192397B (zh) 视觉机器人离线编程方法和系统
CN111055293A (zh) 一种基于曲面自适应的工业机器人高精度恒力打磨方法
CN111644935A (zh) 一种机器人三维扫描测量装置及工作方法
CN106643551A (zh) 一种叶片形状快速扫描装置及方法
CN109683552B (zh) 一种基面曲线导向的复杂点云模型上的数控加工路径生成方法
CN110065068B (zh) 一种基于逆向工程的机器人装配作业演示编程方法及装置
CN109366503B (zh) 基于移动式混联机器人的面向大型构件的加工工艺方法
Ng et al. Programming a robot for conformance grinding of complex shapes by capturing the tacit knowledge of a skilled operator
CN106705880B (zh) 一种大口径反射镜面形轮廓在位检测方法及装置
CN115972093B (zh) 工件表面的测量方法及装置、机翼壁板软模的打磨方法
Lu et al. A multi-sensor approach for rapid and precise digitization of free-form surface in reverse engineering
CN111823100A (zh) 一种基于机器人的小曲率抛光打磨方法
Barnfather et al. Development and testing of an error compensation algorithm for photogrammetry assisted robotic machining
CN110281152B (zh) 一种基于在线试触的机器人恒力打磨路径规划方法及系统
CN118342505A (zh) 一种基于机器视觉的机器人打磨轨迹规划方法及装置
CN118386236A (zh) 基于线激光扫描与立体视觉结合的免示教机器人自主焊接打磨方法
Chen et al. A vision-based calibration method for aero-engine blade-robotic grinding system
CN116958178B (zh) 一种基于激光视觉的焊缝打磨自主规划方法及系统
Zhang et al. Robot automation grinding process for nuclear reactor coolant pump based on reverse engineering

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant