CN113048908A - 一种基于激光扫描的海底地貌探测图像生成系统 - Google Patents
一种基于激光扫描的海底地貌探测图像生成系统 Download PDFInfo
- Publication number
- CN113048908A CN113048908A CN202110249243.9A CN202110249243A CN113048908A CN 113048908 A CN113048908 A CN 113048908A CN 202110249243 A CN202110249243 A CN 202110249243A CN 113048908 A CN113048908 A CN 113048908A
- Authority
- CN
- China
- Prior art keywords
- scanning
- laser scanning
- laser
- underwater
- detection image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C13/00—Surveying specially adapted to open water, e.g. sea, lake, river or canal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/128—Adjusting depth or disparity
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/194—Transmission of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
Abstract
本发明涉及水下观测系统,具体涉及一种基于激光扫描的海底地貌探测图像生成系统,包括扫描支架、双目相机、LED照明装置、透明腹舱、激光扫描系统、集成水下工作电池组、水下控制及图像数据处理单元、数据存储控制单元和对外通信模块,所述双目相机固定安装在所述扫描支架上,所述LED照明装置固定安装在所述扫描支架的外侧,所述LED照明装置用于降低环境光对于扫描过程的影响并避免激光线反光干扰,所述透明腹舱固定安装在所述扫描支架底部。本发明采用了双目相机结合激光扫描的方式对指定区域的海底地貌进行精确的探测和图像生成,使得基于激光扫描的海底地貌探测系统生成的图像会比水下相机系统扫描的精度高。
Description
技术领域
本发明涉及水下观测系统,具体涉及一种基于激光扫描的海底地貌探测图像生成系统。
背景技术
激光扫描三维测量技术凭借其非接触、精度高、适用范围广等优点,目前已经成为工业领域中不可或缺的技术,该项技术被广泛用于产品缺陷检查、尺寸测量、文物重建、视觉导航、地貌测量等领域,具有非常高的实用价值。现有的海底地貌探测系统采用的是水下相机的方式进行扫描。水下相机进行扫描后形成海底地貌图像。水下相机扫描的方式有着非接触、适用范围广特点,但同时也存在检测精度不高的问题。现在急需一种能够解决水下相机地貌探测精度不足问题的海底地貌探测图像生成系统。
发明内容
本发明要解决的技术问题是针对现有技术的不足,提供一种基于激光扫描的海底地貌探测图像生成系统。
本发明要解决的技术问题是通过以下技术方案实现的,本发明公开了一种基于激光扫描的海底地貌探测图像生成系统,包括扫描支架、双目相机、LED照明装置、透明腹舱、激光扫描系统、集成水下工作电池组、水下控制及图像数据处理单元、数据存储控制单元和对外通信模块,所述双目相机固定安装在所述扫描支架上,所述LED照明装置固定安装在所述扫描支架的外侧,所述LED照明装置用于降低环境光对于扫描过程的影响并避免激光线反光干扰,所述透明腹舱固定安装在所述扫描支架底部,所述透明腹舱内侧水密安装有激光扫描系统,所述激光扫描系统利用扫描电磁耦合系统进行周期扫描,所述集成水下工作电池组、水下控制及图像数据处理单元、数据存储控制单元和对外通信模块均集成化水密安装在所述扫描支架上,所述双目相机、LED照明装置、激光扫描系统、集成水下工作电池组、水下控制及图像数据处理单元、数据存储控制单元和对外通信模块均电性连接。
进一步,所述双目摄像机包括左侧摄像头和右侧摄像头,所述左侧摄像头和右侧摄像头用于将水下图像画面同时输出到同一个画布并显示成像结果。
进一步,所述激光扫描系统包括定位电机驱动装置、内筒、外筒、激光扫描器和摆动电机驱动装置,所述定位电机驱动装置外侧设有连接端盖,所述定位电机驱动装置通过连接端盖固定安装在所述内筒的右端,所述内筒中心安装有控制丝杠,所述控制丝杠上安装有滑块装置,所述控制丝杠左右两侧连接有丝杠轴承,所述丝杠轴承固定安装在内筒的左右两端,所述外筒套装在所述内筒外侧,所述激光扫描器成列固定安装在外筒的底部,所述外筒通过所述摆动电机驱动装置驱动。
进一步,所述定位电机驱动装置包括反向驱动转换控制模块。
进一步,所述外筒和内筒之间设有扫描电磁耦合系统,所述扫描电磁耦合系统包括磁场吸附发生器和电磁开关元件,所述磁场吸附发生器设在滑块装置的外侧上,所述滑块装置为活塞型结构,所述滑块装置的外侧与内筒的内壁接触。
进一步,所述电磁开关元件设在外筒的内侧方向,所述电磁开关元件与所述激光扫描器对应设置,所述电磁开关元件与所述激光扫描器之间设有连接启动回路,所述电磁开关元件用于与所述磁场吸附发生器进行磁力吸附耦合。
进一步,所述外筒和内筒的内壁均通过磁通树脂制作而成。
进一步,所述摆动电机驱动装置外侧连接有摆动驱动端盖,所述摆动电机驱动装置通过所述摆动驱动端盖连接在外筒的左端环面上。
进一步,所述外筒的内侧上部设有激光供电模块和通信端口,所述通信端口用于连接所述水下控制及图像数据处理单元,所述激光供电模块呈前后对称式固定安装在外筒内部并用于外筒摆动回复力的形成。
本发明与现有技术相比具有以下优点:
本发明采用了双目相机结合激光扫描的方式对指定区域的海底地貌进行精确的探测和图像生成,使得基于激光扫描的海底地貌探测系统生成的图像会比水下相机系统扫描的精度高;本申请采用的激光扫描系统采用扫描电磁耦合系统,使得激光扫描过程更加迅速有效,可免维护长期使用,十分适于水下环境的使用;同时本申请采用的数据处理方式能够对采集的视频和激光扫描数据进行综合处理,从而得出更加精准的探测数据。
附图说明
图1是本发明激光扫描系统的结构示意图;
1-定位电机驱动装置,11-连接端盖,2-内筒,21-丝杠轴承,22-控制丝杠,23-滑块装置,3-外筒,31-连接启动回路,32-激光供电模块,33-通信端口,4-激光扫描器,5-摆动电机驱动装置,51-摆动驱动端盖,6-扫描电磁耦合系统,61-磁场吸附发生器,62-电磁开关元件。
具体实施方式
如图1所示,本发明公开了一种基于激光扫描的海底地貌探测图像生成系统,包括扫描支架、双目相机、LED照明装置、透明腹舱、激光扫描系统、集成水下工作电池组、水下控制及图像数据处理单元、数据存储控制单元和对外通信模块,所述双目相机固定安装在所述扫描支架上,所述LED照明装置固定安装在所述扫描支架的外侧,所述LED照明装置用于降低环境光对于扫描过程的影响并避免激光线反光干扰,所述透明腹舱固定安装在所述扫描支架底部,所述透明腹舱内侧水密安装有激光扫描系统,所述激光扫描系统利用扫描电磁耦合系统6进行周期扫描,所述集成水下工作电池组、水下控制及图像数据处理单元、数据存储控制单元和对外通信模块均集成化水密安装在所述扫描支架上,所述双目相机、LED照明装置、激光扫描系统、集成水下工作电池组、水下控制及图像数据处理单元、数据存储控制单元和对外通信模块均电性连接。所述双目摄像机包括左侧摄像头和右侧摄像头,所述左侧摄像头和右侧摄像头用于将水下图像画面同时输出到同一个画布并显示成像结果。
所述激光扫描系统包括定位电机驱动装置1、内筒2、外筒3、激光扫描器4和摆动电机驱动装置5,所述定位电机驱动装置1外侧设有连接端盖11,所述定位电机驱动装置1通过连接端盖11固定安装在所述内筒2的右端,所述内筒2中心安装有控制丝杠22,所述控制丝杠22上安装有滑块装置23,所述控制丝杠22左右两侧连接有丝杠轴承21,所述丝杠轴承21固定安装在内筒2的左右两端,所述外筒3套装在所述内筒2外侧,所述激光扫描器4成列固定安装在外筒3的底部,所述外筒3通过所述摆动电机驱动装置5驱动。所述定位电机驱动装置1包括反向驱动转换控制模块。所述外筒3和内筒2之间设有扫描电磁耦合系统6,所述扫描电磁耦合系统6包括磁场吸附发生器61和电磁开关元件62,所述磁场吸附发生器61设在滑块装置23的外侧上,所述滑块装置23为活塞型结构,所述滑块装置23的外侧与内筒2的内壁接触。所述电磁开关元件62设在外筒3的内侧方向,所述电磁开关元件62与所述激光扫描器4对应设置,所述电磁开关元件62与所述激光扫描器4之间设有连接启动回路31,所述电磁开关元件62用于与所述磁场吸附发生器61进行磁力吸附耦合。所述外筒3和内筒2的内壁均通过磁通树脂制作而成。所述摆动电机驱动装置5外侧连接有摆动驱动端盖51,所述摆动电机驱动装置5通过所述摆动驱动端盖51连接在外筒3的左端环面上。所述外筒3的内侧上部设有激光供电模块32和通信端口33,所述通信端口33用于连接所述水下控制及图像数据处理单元,所述激光供电模块32呈前后对称式固定安装在外筒3内部并用于外筒3摆动回复力的形成。
在实际应用时,水下控制及图像数据处理单元需要先判断是否已创建视频存储目录,如果该目录不存在则创建视频存储部分,扫描支架下水前需要先校准双目相机并且输入视频文件的存储名称,选择GoPro模式或者Lena3D模式。除此之外配置系统是在空气中启动还是水下启动。配置完成后系统开始获取开始时间,单位为毫秒。系统在进行水下地貌扫描时,先使扫描支架运动或移动到指定位置,实现指定区域位于视野中并通过LED照明装置进行亮度补偿。系统进行激光扫描时通过横向扫描的方式对海底地貌进行扫描。通过LED照明装置保证环境光尽可能比较弱,避免激光线在其他平面上反光对扫描产生干扰。当系统采集完成视频后系统会通过对外通信模块的以太网口将数据传输回电脑。系统自动将视频转成Frame并进行立体校正,获取视频中的图片并进行中值滤波和动态阈值过滤。系统使用灰度质心法提取激光线,使用激光线计算视差。视差处理后,再通过中值滤波和连通域检测将校正结果显示出来,显示在同一张图片上,左侧摄像头和右侧摄像头的图像画面都输出到同一个画布上。画上对应的线条,显示出成像结果。除此之外还可创建视差百分比窗口和视差窗口。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换及改进等,均应包含在本发明的保护范围之内。
Claims (9)
1.一种基于激光扫描的海底地貌探测图像生成系统,其特征在于:包括扫描支架、双目相机、LED照明装置、透明腹舱、激光扫描系统、集成水下工作电池组、水下控制及图像数据处理单元、数据存储控制单元和对外通信模块,所述双目相机固定安装在所述扫描支架上,所述LED照明装置固定安装在所述扫描支架的外侧,所述LED照明装置用于降低环境光对于扫描过程的影响并避免激光线反光干扰,所述透明腹舱固定安装在所述扫描支架底部,所述透明腹舱内侧水密安装有激光扫描系统,所述激光扫描系统利用扫描电磁耦合系统进行周期扫描,所述集成水下工作电池组、水下控制及图像数据处理单元、数据存储控制单元和对外通信模块均集成化水密安装在所述扫描支架上,所述双目相机、LED照明装置、激光扫描系统、集成水下工作电池组、水下控制及图像数据处理单元、数据存储控制单元和对外通信模块均电性连接。
2.根据权利要求1所述的一种基于激光扫描的海底地貌探测图像生成系统,其特征在于:所述双目摄像机包括左侧摄像头和右侧摄像头,所述左侧摄像头和右侧摄像头用于将水下图像画面同时输出到同一个画布并显示成像结果。
3.根据权利要求1所述的一种基于激光扫描的海底地貌探测图像生成系统,其特征在于:所述激光扫描系统包括定位电机驱动装置、内筒、外筒、激光扫描器和摆动电机驱动装置,所述定位电机驱动装置外侧设有连接端盖,所述定位电机驱动装置通过连接端盖固定安装在所述内筒的右端,所述内筒中心安装有控制丝杠,所述控制丝杠上安装有滑块装置,所述控制丝杠左右两侧连接有丝杠轴承,所述丝杠轴承固定安装在内筒的左右两端,所述外筒套装在所述内筒外侧,所述激光扫描器成列固定安装在外筒的底部,所述外筒通过所述摆动电机驱动装置驱动。
4.根据权利要求3所述的一种基于激光扫描的海底地貌探测图像生成系统,其特征在于:所述定位电机驱动装置包括反向驱动转换控制模块。
5.根据权利要求3所述的一种基于激光扫描的海底地貌探测图像生成系统,其特征在于:所述外筒和内筒之间设有扫描电磁耦合系统,所述扫描电磁耦合系统包括磁场吸附发生器和电磁开关元件,所述磁场吸附发生器设在滑块装置的外侧上,所述滑块装置为活塞型结构,所述滑块装置的外侧与内筒的内壁接触。
6.根据权利要求5所述的一种基于激光扫描的海底地貌探测图像生成系统,其特征在于:所述电磁开关元件设在外筒的内侧方向,所述电磁开关元件与所述激光扫描器对应设置,所述电磁开关元件与所述激光扫描器之间设有连接启动回路,所述电磁开关元件用于与所述磁场吸附发生器进行磁力吸附耦合。
7.根据权利要求3所述的一种基于激光扫描的海底地貌探测图像生成系统,其特征在于:所述外筒和内筒的内壁均通过磁通树脂制作而成。
8.根据权利要求3所述的一种基于激光扫描的海底地貌探测图像生成系统,其特征在于:所述摆动电机驱动装置外侧连接有摆动驱动端盖,所述摆动电机驱动装置通过所述摆动驱动端盖连接在外筒的左端环面上。
9.根据权利要求3所述的一种基于激光扫描的海底地貌探测图像生成系统,其特征在于:所述外筒的内侧上部设有激光供电模块和通信端口,所述通信端口用于连接所述水下控制及图像数据处理单元,所述激光供电模块呈前后对称式固定安装在外筒内部并用于外筒摆动回复力的形成。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110249243.9A CN113048908B (zh) | 2021-03-08 | 2021-03-08 | 一种基于激光扫描的海底地貌探测图像生成系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110249243.9A CN113048908B (zh) | 2021-03-08 | 2021-03-08 | 一种基于激光扫描的海底地貌探测图像生成系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113048908A true CN113048908A (zh) | 2021-06-29 |
CN113048908B CN113048908B (zh) | 2022-04-26 |
Family
ID=76510641
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110249243.9A Active CN113048908B (zh) | 2021-03-08 | 2021-03-08 | 一种基于激光扫描的海底地貌探测图像生成系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113048908B (zh) |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09251137A (ja) * | 1996-03-15 | 1997-09-22 | Konica Corp | レーザ記録装置 |
WO2004083778A1 (en) * | 2003-03-18 | 2004-09-30 | Hermary Alexander Thomas | Coded-light dual-view profile scanner |
US20060017937A1 (en) * | 2004-07-22 | 2006-01-26 | The Boeing Company | Non-destructive inspection using laser profiling and associated method |
CN101025471A (zh) * | 2006-02-22 | 2007-08-29 | 一品光学工业股份有限公司 | 多光束的直列式雷射扫描装置 |
KR101117761B1 (ko) * | 2011-09-09 | 2012-03-16 | 권광석 | 레이저 격자패턴을 이용한 3차원 해저면 복원장치 및 이를 이용한 해저면 복원방법 |
CN103900489A (zh) * | 2014-03-11 | 2014-07-02 | 苏州江奥光电科技有限公司 | 一种线激光扫描三维轮廓测量方法及装置 |
CN105654549A (zh) * | 2015-12-31 | 2016-06-08 | 中国海洋大学 | 基于结构光技术和光度立体技术的水下三维重建装置及方法 |
CN107505324A (zh) * | 2017-08-10 | 2017-12-22 | 王兴 | 基于双目协同激光的3d扫描装置及扫描方法 |
CN207642980U (zh) * | 2017-12-08 | 2018-07-24 | 吉林重通成飞新材料股份公司 | 一种激光检测装置及叶片成型工装 |
CN109709574A (zh) * | 2019-01-09 | 2019-05-03 | 国家海洋局第一海洋研究所 | 一种海底微地形激光扫描成像系统及三维地形重建方法 |
CN111076676A (zh) * | 2019-12-16 | 2020-04-28 | 广州海洋地质调查局 | 一种水下三维扫描仪及控制方法 |
CN111182285A (zh) * | 2019-12-30 | 2020-05-19 | 陕西格兰浮智能科技有限公司 | 一种水下物体的图像采集方法及装置 |
-
2021
- 2021-03-08 CN CN202110249243.9A patent/CN113048908B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09251137A (ja) * | 1996-03-15 | 1997-09-22 | Konica Corp | レーザ記録装置 |
WO2004083778A1 (en) * | 2003-03-18 | 2004-09-30 | Hermary Alexander Thomas | Coded-light dual-view profile scanner |
US20060017937A1 (en) * | 2004-07-22 | 2006-01-26 | The Boeing Company | Non-destructive inspection using laser profiling and associated method |
CN101025471A (zh) * | 2006-02-22 | 2007-08-29 | 一品光学工业股份有限公司 | 多光束的直列式雷射扫描装置 |
KR101117761B1 (ko) * | 2011-09-09 | 2012-03-16 | 권광석 | 레이저 격자패턴을 이용한 3차원 해저면 복원장치 및 이를 이용한 해저면 복원방법 |
CN103900489A (zh) * | 2014-03-11 | 2014-07-02 | 苏州江奥光电科技有限公司 | 一种线激光扫描三维轮廓测量方法及装置 |
CN105654549A (zh) * | 2015-12-31 | 2016-06-08 | 中国海洋大学 | 基于结构光技术和光度立体技术的水下三维重建装置及方法 |
CN107505324A (zh) * | 2017-08-10 | 2017-12-22 | 王兴 | 基于双目协同激光的3d扫描装置及扫描方法 |
CN207642980U (zh) * | 2017-12-08 | 2018-07-24 | 吉林重通成飞新材料股份公司 | 一种激光检测装置及叶片成型工装 |
CN109709574A (zh) * | 2019-01-09 | 2019-05-03 | 国家海洋局第一海洋研究所 | 一种海底微地形激光扫描成像系统及三维地形重建方法 |
CN111076676A (zh) * | 2019-12-16 | 2020-04-28 | 广州海洋地质调查局 | 一种水下三维扫描仪及控制方法 |
CN111182285A (zh) * | 2019-12-30 | 2020-05-19 | 陕西格兰浮智能科技有限公司 | 一种水下物体的图像采集方法及装置 |
Non-Patent Citations (2)
Title |
---|
易杰等: "多个单目线激光传感器旋转扫描系统高精度标定方法", 《铸造技术》 * |
赵建虎等: "海底地形测量技术现状及发展趋势", 《测绘学报》 * |
Also Published As
Publication number | Publication date |
---|---|
CN113048908B (zh) | 2022-04-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CA2902430C (en) | Methods, systems, and apparatus for multi-sensory stereo vision for robotics | |
CN103337069B (zh) | 基于复合摄像机的高质量三维彩色图像获取方法及装置 | |
CN203380508U (zh) | 一种带有机器视觉的激光加工系统 | |
CN107241533B (zh) | 一种水下面阵扫描激光成像装置及方法 | |
WO2017175261A1 (ja) | 濁度検出装置、濁度検出方法及び液中検査装置 | |
CN111076676A (zh) | 一种水下三维扫描仪及控制方法 | |
CN213812165U (zh) | 一种应用于水下的三维扫描成像系统 | |
CN113048908B (zh) | 一种基于激光扫描的海底地貌探测图像生成系统 | |
CN112858175A (zh) | 一种带有集成镜头的视觉检测系统 | |
CN207923292U (zh) | 用于变压器检测的潜油探测机器人及潜油探测系统 | |
CN112461213B (zh) | 一种多模态波浪监测装置及监测方法 | |
CN106254771A (zh) | 拍摄防抖方法、装置和移动终端 | |
CN111930131A (zh) | 一种适用于复杂环境的获取图形的装置和应用方法 | |
CN214408670U (zh) | 一种带有集成镜头的视觉检测系统 | |
CN214747806U (zh) | 一种应用于水下的三维扫描成像设备 | |
CN109990901A (zh) | 用于变压器检测的潜油探测机器人及潜油探测系统 | |
CN219164626U (zh) | 一种照明光可调的水下视觉装置 | |
CN203658665U (zh) | 一种直视广角调焦工业内窥镜 | |
CN109470143B (zh) | 外部光源高分辨力立体视觉测量系统与方法 | |
CN113008862A (zh) | 一种水下拉曼探头及水下探测系统 | |
CN214374259U (zh) | 一种适用于水下的高光谱成像分析仪 | |
CN116539627B (zh) | 内窥镜探头、三维测量内窥镜及探伤方法 | |
CN117233090A (zh) | 一种大坝表面缺陷定位装置 | |
JP6145728B1 (ja) | 液中検査装置及び液中検査方法 | |
CN211346718U (zh) | 一种水下三维扫描仪 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |