CN103777630A - 定位导航系统及其控制方法 - Google Patents

定位导航系统及其控制方法 Download PDF

Info

Publication number
CN103777630A
CN103777630A CN201310680011.4A CN201310680011A CN103777630A CN 103777630 A CN103777630 A CN 103777630A CN 201310680011 A CN201310680011 A CN 201310680011A CN 103777630 A CN103777630 A CN 103777630A
Authority
CN
China
Prior art keywords
carrying platform
navigation system
server
camera
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310680011.4A
Other languages
English (en)
Inventor
杜骁释
胡建军
谢凯文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
WUHAN HANDY ROBOTICS TECHNOLOGY Inc
Original Assignee
WUHAN HANDY ROBOTICS TECHNOLOGY Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by WUHAN HANDY ROBOTICS TECHNOLOGY Inc filed Critical WUHAN HANDY ROBOTICS TECHNOLOGY Inc
Priority to CN201310680011.4A priority Critical patent/CN103777630A/zh
Publication of CN103777630A publication Critical patent/CN103777630A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Navigation (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明提供一种定位导航系统,通过多个网络摄像头采集运载平台上的红外激光光源的信息,将该信息通过无线方式传送到服务器中,服务器对该信息处理分析后确定该运载平台的具体位置,再通过无线方式传送到运载平台中的主控板,主控板再结合RFID卡的信息,来控制电机驱动器驱动电机调整麦克纳姆全向轮的速度与转向。本发明还提供一种定位导航系统的控制方法,结合网络摄像头中带有红外线的视频流确定相应运载平台的位置,结合运载平台的自身姿态、RFID卡信息来确定运载平台的最佳运行路径。

Description

定位导航系统及其控制方法
技术领域
本发明涉及机器人导航领域,具体涉及一种定位导航系统及其控制方法。
背景技术
移动机器人导航方式有电磁导航,惯性导航,激光导航,视觉导航等。一类是基于寻迹的导引模式,另一种是无轨迹式全局自主定位导航。目前国内的移动机器人大多是采用基于AGV的导航模式,它实现简单,但需要预先设定运动轨迹,在地面铺设磁条或其它导引线,无法适应环境未知和路径多变的场合。机器人视觉导航的技术现在也很广泛,视觉导航系统按照定位方式又分为全局定位系统和局部定位系统。全局视觉定位系统中视觉传感器与车体相独立,局部视觉定位系统中视觉传感器则是安装在车体上。一般的机器人全局视觉导航系统,不需要铺设引导线,并能同时控制多台移动机器人的运动,但它容易受到光线和外界物体的干扰,很难适应工厂中复杂的环境。
发明内容
本发明的目的在于解决现有技术存在的问题,提供一种定位导航系统,通过多个网络摄像头采集运载平台运行的整个环境中的红外线视频信息,将该视频信息通过无线方式传送到服务器中,服务器对该视频信息处理分析后确定该运载平台的具体位置,再通过无线方式传送到运载平台中的主控板,主控板再结合RFID卡的信息,来控制电机驱动器驱动电机调整麦克纳姆全向轮的速度与转向。本发明还提供一种定位导航系统的控制方法,结合网络摄像头中带有红外线的视频流确定相应运载平台的位置,结合运载平台的自身姿态、RFID卡信息来确定运载平台的最佳运行路径。
为了达到上述技术目的,本发明采用以下技术方案:
一种定位导航系统,包括多个网络摄像头、服务器、RFID卡和运载平台,所述的多个网络摄像头均匀地分布在所述运载平台运动区域的上方,所述的网络摄像头、服务器及运载平台通过无线方式连接,所述的运载平台上设有红外激光光源、主控板、电机驱动器、电机及麦克纳姆全向轮,所述的主控板、电机驱动器、电机及麦克纳姆全向轮依次相连接。
作为上述方案的优选,所述的运载平台为多个。
作为上述方案的优选,所述的运载平台上还包设有IMU传感器及编码器。
作为上述方案的优选,所述的运载平台上还设有倒车雷达。
作为上述方案的优选,每个运载平台上设有两个所述的红外激光光源,分别设置于所述的运载平台的前后端边缘处。
本发明提供的一种定位导航系统相比现有技术具有以下优点:
1、通过多个网络摄像头采集运载平台上的红外激光光源的信息,将该信息通过无线方式传送到服务器中,服务器对该信息处理分析后确定该运载平台的具体位置,再通过无线方式传送到运载平台中的主控板,主控板再结合RFID卡的信息,来控制电机驱动器驱动电机调整麦克纳姆全向轮的速度与转向。
2、包含多个运载平台,可同时控制多个运载平台,使运载平台协同工作或单独工作不受干扰。
3、运载平台上还包设有IMU传感器及编码器,能够准确地进行自定位。
4、运载平台上还设有倒车雷达,可以在运载平台行走的过程中有效避障。
5、一个运载平台上设有两个红外激光光源,使网络摄像头采集运载平台的位置信息更准确。
本发明还提供一种定位导航系统的控制方法,用于控制上述定位导航系统,步骤包括
将运载平台及网络摄像头进行编号,将其系统地存入服务器中,便于对其进行统一管理;
提取有红外光的视频流,将网络摄像头采集的视频流传入服务器中,服务器将具有红外光的视频流提取出来;
确定运载平台的位置,服务器根据具有红外光的视频流确认相应运载平台的位置;
对运载平台进行路径规划,根据运载平台的位置及运载平台自身的姿态,再结合RFID卡的信息来确定运载平台的最优路径。
作为上述方案的优选,所述的确定运载平台的位置这一步骤中包括确定运载平台的相对位置及确定运载平台的绝对位置,
确定运载平台的相对位置,根据相应的红外光确定该运载平台在该视频流中的位置;
确定运载平台的绝对位置,根据运载平台的相对位置和该运载平台上摄像头的安装角度确定该运载平台在整个环境中的绝对位置。
作为上述方案的优选,所述的对运载平台进行路径规划这一步骤中还包括避障,根据运载平台的位置及运载平台自身的姿态,再结合RFID卡的信息,同时规避障碍物,从而来确定运载平台的最优路径。
本发明提供的一种定位导航系统的控制方法相比现有技术具有以下优点:
1、将运载平台及网络摄像头进行编号并系统地录入服务器中,根据网络摄像头采集的带有红外光的视频流确认相应的运载平台的位置,再结合该运载平台的姿态及RFID卡的信息来确定该运载平台的最优路径。
2、确定运载平台的位置这一步骤中包括确定运载平台的相对位置及确定运载平台的绝对位置,使运载平台的位置确定更加系统与细致,使确定运载平台的位置更准确、合理。
3、对运载平台进行路径规划这一步骤中还包括避障,使运载平台的路径规划得更合理,运行更顺畅。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明提供的定位导航系统的实施例一的结构框图;
图2为本发明提供的定位导航系统的实施例二的结构框图。
具体实施方式
下面将结合本发明的附图,对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,本发明提供一种定位导航系统,包括多个网络摄像头、服务器、RFID卡和运载平台,所述的多个网络摄像头均匀地分布在所述运载平台运动区域的上方,所述的网络摄像头、服务器及运载平台通过无线局域网连接,所述的运载平台上设有红外激光光源、主控板、电机驱动器、电机及麦克纳姆全向轮,所述的主控板、电机驱动器、电机及麦克纳姆全向轮依次相连接;所述的运载平台上还包设有IMU传感器、编码器及倒车雷达;每个运载平台上设有两个所述的红外激光光源,分别设置于所述的运载平台的前后端边缘处,所述的无线局域网可以是WIFI。
本发明提供的一种定位导航系统,通过均匀分布在运载平台运行区间上方的多个网络摄像头采集运载平台运行的整个环境中的红外线视频信息,将该信息通过无线局域网传送到服务器中,服务器对该视频信息处理分析后再通过无线局域网传送到运载平台中的主控板,从而主控板控制电机驱动器驱动电机调整麦克纳姆全向轮的速度与转向;运载平台上还包设有IMU传感器及编码器,能够准确地进行自定位;运载平台上还设有倒车雷达,可以在运载平台行走的过程中有效避障;一个运载平台上设有两个红外激光光源,使网络摄像头采集运载平台的位置信息更准确。
本发明提供一种定位导航系统的工作原理为,首先将多个网络摄像头均匀地固定于运载平台运动区的上方,确保网络摄像头能够覆盖运载平台运动的工作区间。服务器安放在运载平台运动的工作区间内,此时运载平台开始运动,网络摄像头采集其视野范围内的视频流信息,并将该信息通过无线局域网传送到服务器,服务器将具有红外光的视频流提取出来并处理得到该运载平台的位置信息,再通过无线局域网将该位置信息传送到主控板上,同时IMU传感器、编码器会测出目前该运载平台自身的运动姿态并传送给主控板,倒车雷达测出的障碍物信息并传送到主控板,主控板综合考虑运载平台的位置信息、运动姿态及障碍物信息,再结合RFID卡上的信息来发出控制指令,从而控制电机驱动器驱动电机调整麦克纳姆全向轮的速度与转向,进而实现运载平台的自主避障、加减速、停车、转弯等。
优选地,如图2所示,所述的运载平台为多个。可同时控制多个运载平台,使运载平台协同工作或单独工作不受干扰。
包含多个运载平台与单个运载平台不同的是,多个网络摄像头采集多个运载平台的红外视频流信息,当多个网络摄像头向服务器传送多个运载平台的红外视频信息时,服务器会根据网络摄像头采集的不同运载平台上的红外视频信息对不同的运载平台作出位置判断并将各自的位置信息分别发送至相应的运载平台,从而控制不同的运载平台沿着相应的轨迹运动。
本发明还提供一种定位导航系统的控制方法,用于控制上述定位导航系统,步骤包括:将运载平台及网络摄像头进行编号,将其系统地存入服务器中,便于对其进行统一管理;提取有红外光的视频流,将网络摄像头采集的视频流传入服务器中,服务器将具有红外光的视频流提取出来;确定运载平台的位置,服务器根据具有红外光的视频流确认相应运载平台的位置;对运载平台进行路径规划,根据运载平台的位置及运载平台自身的姿态,再结合RFID卡的信息来确定运载平台的最优路径。
本发明提供的一种定位导航系统的控制方法,将运载平台及网络摄像头进行编号并系统地录入服务器中,根据网络摄像头采集的带有红外光的视频流确认相应的运载平台的位置,再结合该运载平台的姿态及RFID卡的信息来确定该运载平台的最优路径。
优选地,所述的确定运载平台的位置这一步骤中包括确定运载平台的相对位置及确定运载平台的绝对位置,确定运载平台的相对位置,根据相应的红外光确定该运载平台在该视频流中的位置;确定运载平台的绝对位置,根据运载平台的相对位置和该运载平台上摄像头的安装角度确定该运载平台在整个环境中的绝对位置。确定运载平台的位置这一步骤中包括确定运载平台的相对位置及确定运载平台的绝对位置,使运载平台的位置确定更加系统与细致,使确定运载平台的位置更准确、合理。
优选地,所述的对运载平台进行路径规划这一步骤中还包括避障,根据运载平台的位置及运载平台自身的姿态,再结合RFID卡的信息,同时规避障碍物,从而来确定运载平台的最优路径。对运载平台进行路径规划这一步骤中还包括避障,使运载平台的路径规划得更合理,运行更顺畅。
本发明提供的一种定位导航系统的控制方法,首先在服务器中对各网络摄像头及运载平台进行编号,便于系统管理;然后网络摄像头采集视频流并通过无线局域网传入服务器中,服务器根据包含有红外光的视频流首先确认该运载平台在该视频流中的相对位置,然后转换成其在整个环境中的绝对位置,并将该绝对位置通过无线局域网传入相应运载平台中的主控板中,主控板根据该绝对位置,结合IMU传感器及编码器确定该运载平台此时的运动姿态,再根据RFID卡的信息和倒车雷达显示的避障信息,最终确定该运载平台运行的最佳路径,规划出最佳路径后,主控板根据最佳路径控制电机驱动器驱动电机的转速来调整麦克纳姆全向轮的运动方向及速度。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (8)

1.一种定位导航系统,其特征在于,包括多个网络摄像头、服务器、RFID卡和运载平台,所述的多个网络摄像头均匀地分布在所述运载平台运动区域的上方,所述的网络摄像头、服务器及运载平台通过无线方式连接,所述的运载平台上设有红外激光光源、主控板、电机驱动器、电机及麦克纳姆全向轮,所述的主控板、电机驱动器、电机及麦克纳姆全向轮依次相连接。
2.根据权利要求1所述的定位导航系统,其特征在于,所述的运载平台为多个。
3.根据权利要求1或2所述的定位导航系统,其特征在于,所述的运载平台上还包设有IMU传感器及编码器。
4.根据权利要求1或2所述的定位导航系统,其特征在于,所述的运载平台上还设有倒车雷达。
5.根据权利要求1或2所述的定位导航系统,其特征在于,每个运载平台上设有两个所述的红外激光光源,分别设置于所述的运载平台的前后端边缘处。
6.一种定位导航系统的控制方法,其特征在于,用于控制权利要求1-5中任一定位导航系统,步骤包括
将运载平台及网络摄像头进行编号,将其系统地存入服务器中,便于对其进行统一管理;
提取有红外光的视频流,将网络摄像头采集的视频流传入服务器中,服务器将具有红外光的视频流提取出来;
确定运载平台的位置,服务器根据具有红外光的视频流确认相应运载平台的位置;
对运载平台进行路径规划,根据运载平台的位置及运载平台自身的姿态,再结合RFID卡的信息来确定运载平台的最优路径。
7.根据权利要求6所述的定位导航系统的控制方法,其特征在于,所述的确定运载平台的位置这一步骤中包括确定运载平台的相对位置及确定运载平台的绝对位置,
确定运载平台的相对位置,根据相应的红外光确定该运载平台在该视频流中的位置;
确定运载平台的绝对位置,根据运载平台的相对位置和该运载平台上摄像头的安装角度确定该运载平台在整个环境中的绝对位置。
8.根据权利要求6所述的定位导航系统的控制方法,其特征在于,所述的对运载平台进行路径规划这一步骤中还包括避障,根据运载平台的位置及运载平台自身的姿态,再结合RFID卡的信息,同时规避障碍物,从而来确定运载平台的最优路径。
CN201310680011.4A 2013-12-12 2013-12-12 定位导航系统及其控制方法 Pending CN103777630A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310680011.4A CN103777630A (zh) 2013-12-12 2013-12-12 定位导航系统及其控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310680011.4A CN103777630A (zh) 2013-12-12 2013-12-12 定位导航系统及其控制方法

Publications (1)

Publication Number Publication Date
CN103777630A true CN103777630A (zh) 2014-05-07

Family

ID=50570003

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310680011.4A Pending CN103777630A (zh) 2013-12-12 2013-12-12 定位导航系统及其控制方法

Country Status (1)

Country Link
CN (1) CN103777630A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104089617A (zh) * 2014-07-31 2014-10-08 四川阿泰因机器人智能装备有限公司 一种移动机器人用定位装置及定位方法
CN104111656A (zh) * 2014-08-06 2014-10-22 武汉汉迪机器人科技有限公司 多台移动机器人平台导航控制系统及其控制方法
CN105607635A (zh) * 2016-01-05 2016-05-25 东莞市松迪智能机器人科技有限公司 自动导引车全景光学视觉导航控制系统及全向自动导引车
CN106325267A (zh) * 2015-06-26 2017-01-11 北京卫星环境工程研究所 具有自主巡线和避障功能的全方位移动平台车
CN106843224A (zh) * 2017-03-15 2017-06-13 广东工业大学 一种多目视觉定位协同引导运输车的方法及装置
CN107089458A (zh) * 2017-07-03 2017-08-25 成都大学 一种新型的智能环保垃圾自动回收系统
CN108958250A (zh) * 2018-07-13 2018-12-07 华南理工大学 多传感器移动平台及基于已知地图的导航与避障方法
CN109901568A (zh) * 2017-12-10 2019-06-18 湘潭宏远电子科技有限公司 一种机器人驱动控制装置

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5040116A (en) * 1988-09-06 1991-08-13 Transitions Research Corporation Visual navigation and obstacle avoidance structured light system
CN101109630A (zh) * 2006-07-18 2008-01-23 三星电子株式会社 测量距离的信标、使用其的定位系统和测量距离的方法
CN101537618A (zh) * 2008-12-19 2009-09-23 北京理工大学 体育场捡球机器人视觉系统
CN101661098A (zh) * 2009-09-10 2010-03-03 上海交通大学 机器人餐厅多机器人自动定位系统
CN101660912A (zh) * 2009-09-25 2010-03-03 湖南农业大学 一种自动导航定位装置及方法
CN101739027A (zh) * 2009-12-01 2010-06-16 蒋平 基于分布式视觉传感网络的移动导航系统
CN101777123A (zh) * 2010-01-21 2010-07-14 北京理工大学 一种基于红外投影标志点的视觉位置跟踪系统
CN102323817A (zh) * 2011-06-07 2012-01-18 上海大学 一种服务机器人控制平台系统及其多模式智能交互与智能行为的实现方法
CN102818568A (zh) * 2012-08-24 2012-12-12 中国科学院深圳先进技术研究院 室内机器人的定位与导航系统及方法
CN102914303A (zh) * 2012-10-11 2013-02-06 江苏科技大学 多移动机器人的智能空间系统及导航信息获取方法
CN203630622U (zh) * 2013-12-12 2014-06-04 武汉汉迪机器人科技有限公司 定位导航系统

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5040116A (en) * 1988-09-06 1991-08-13 Transitions Research Corporation Visual navigation and obstacle avoidance structured light system
CN101109630A (zh) * 2006-07-18 2008-01-23 三星电子株式会社 测量距离的信标、使用其的定位系统和测量距离的方法
CN101537618A (zh) * 2008-12-19 2009-09-23 北京理工大学 体育场捡球机器人视觉系统
CN101661098A (zh) * 2009-09-10 2010-03-03 上海交通大学 机器人餐厅多机器人自动定位系统
CN101660912A (zh) * 2009-09-25 2010-03-03 湖南农业大学 一种自动导航定位装置及方法
CN101739027A (zh) * 2009-12-01 2010-06-16 蒋平 基于分布式视觉传感网络的移动导航系统
CN101777123A (zh) * 2010-01-21 2010-07-14 北京理工大学 一种基于红外投影标志点的视觉位置跟踪系统
CN102323817A (zh) * 2011-06-07 2012-01-18 上海大学 一种服务机器人控制平台系统及其多模式智能交互与智能行为的实现方法
CN102818568A (zh) * 2012-08-24 2012-12-12 中国科学院深圳先进技术研究院 室内机器人的定位与导航系统及方法
CN102914303A (zh) * 2012-10-11 2013-02-06 江苏科技大学 多移动机器人的智能空间系统及导航信息获取方法
CN203630622U (zh) * 2013-12-12 2014-06-04 武汉汉迪机器人科技有限公司 定位导航系统

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104089617A (zh) * 2014-07-31 2014-10-08 四川阿泰因机器人智能装备有限公司 一种移动机器人用定位装置及定位方法
CN104089617B (zh) * 2014-07-31 2017-07-04 四川阿泰因机器人智能装备有限公司 一种移动机器人用定位装置及定位方法
CN104111656A (zh) * 2014-08-06 2014-10-22 武汉汉迪机器人科技有限公司 多台移动机器人平台导航控制系统及其控制方法
CN106325267A (zh) * 2015-06-26 2017-01-11 北京卫星环境工程研究所 具有自主巡线和避障功能的全方位移动平台车
CN105607635A (zh) * 2016-01-05 2016-05-25 东莞市松迪智能机器人科技有限公司 自动导引车全景光学视觉导航控制系统及全向自动导引车
CN105607635B (zh) * 2016-01-05 2018-12-14 东莞市松迪智能机器人科技有限公司 自动导引车全景光学视觉导航控制系统及全向自动导引车
CN106843224A (zh) * 2017-03-15 2017-06-13 广东工业大学 一种多目视觉定位协同引导运输车的方法及装置
CN106843224B (zh) * 2017-03-15 2020-03-10 广东工业大学 一种多目视觉定位协同引导运输车的方法及装置
CN107089458A (zh) * 2017-07-03 2017-08-25 成都大学 一种新型的智能环保垃圾自动回收系统
CN107089458B (zh) * 2017-07-03 2023-03-31 成都大学 一种新型的智能环保垃圾自动回收系统
CN109901568A (zh) * 2017-12-10 2019-06-18 湘潭宏远电子科技有限公司 一种机器人驱动控制装置
CN108958250A (zh) * 2018-07-13 2018-12-07 华南理工大学 多传感器移动平台及基于已知地图的导航与避障方法

Similar Documents

Publication Publication Date Title
CN103777630A (zh) 定位导航系统及其控制方法
CN107209518B (zh) 代客泊车方法和代客泊车系统
CN109866759B (zh) 一种自动泊车方法
EP3590016B1 (en) Method and system for simultaneous localization and sensor calibration
KR101776823B1 (ko) 외부 감시카메라를 이용한 모바일 로봇의 위치인식 방법 및 시스템
CN109564430B (zh) 移动体引导系统、移动体、引导装置以及计算机程序
US9541922B2 (en) Vehicle control system and vehicle control method
US20180284807A1 (en) Autonomous Vehicle Paletization System
WO2018003814A1 (ja) 移動体誘導システム、移動体、誘導装置およびコンピュータプログラム
Patz et al. A practical approach to robotic design for the DARPA urban challenge
US20110135189A1 (en) Swarm intelligence-based mobile robot, method for controlling the same, and surveillance robot system
CN109002046B (zh) 一种移动机器人导航系统及导航方法
CN109005863A (zh) 具有多个充电站的耕作系统
CN106325267A (zh) 具有自主巡线和避障功能的全方位移动平台车
US20150168953A1 (en) Autonomous self-leveling vehicle
JP2014203146A (ja) ロボット誘導方法と装置
CN110716549A (zh) 用于无地图区域巡逻的自主导航机器人系统及其导航方法
JP2010152834A (ja) 無人移動体システム
CN110900575A (zh) 一种具有自动导引功能的并联智能机器人及其导引方法
JPWO2019059307A1 (ja) 移動体および移動体システム
CN110884908A (zh) 用于物料运输的实时形成的机器人群
CN211590103U (zh) 一种具有自动导引功能的并联智能机器人
WO2019054205A1 (ja) 移動ロボットシステム
CN115164870A (zh) 一种空地协作模式下的室内自主相对定位导航方法
CN103076804A (zh) 基于超声测距仪的自动引导车、系统及导航方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140507

WD01 Invention patent application deemed withdrawn after publication