CN105160919A - 限速标志识别方法及系统 - Google Patents

限速标志识别方法及系统 Download PDF

Info

Publication number
CN105160919A
CN105160919A CN201510483217.7A CN201510483217A CN105160919A CN 105160919 A CN105160919 A CN 105160919A CN 201510483217 A CN201510483217 A CN 201510483217A CN 105160919 A CN105160919 A CN 105160919A
Authority
CN
China
Prior art keywords
speed
speed limit
limit data
data
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510483217.7A
Other languages
English (en)
Inventor
唐旭
何富军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Vastfly Tech Co ltd
Original Assignee
Shenzhen Vastfly Tech Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Vastfly Tech Co ltd filed Critical Shenzhen Vastfly Tech Co ltd
Priority to CN201510483217.7A priority Critical patent/CN105160919A/zh
Publication of CN105160919A publication Critical patent/CN105160919A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Traffic Control Systems (AREA)

Abstract

本发明涉及限速标志识别方法及系统,所述方法包括如下步骤:通过车载摄像头获取图像;根据预先建立的道路限速标志数据库,查找与所述图像所匹配的限速数据,所述限速数据包括限速类型、数值;若查找到匹配的限速数据,则获取当前车辆行驶速度,并根据所述限速数据发出超速告警对驾驶员进行提示,以便驾驶员调节当前车辆行驶速度;若未查找到匹配的限速数据,则将所述图像通过无线网络上传服务器进行识别;获取服务器识别成功的限速数据,更新至所述道路限速标志数据库中。发现没有匹配数据时,将图片上传服务器,当服务器获取到多个限速数据一致的图片时,形成了新的有效的限速数据,能够更新道路限速标志数据库,保证获取到最新的限速数据。

Description

限速标志识别方法及系统
技术领域
本发明涉及限速标志识别方法及系统。
背景技术
随着汽车工业的日益发展,汽车已经成为人们出行的主要交通工具,随着汽车保有量的逐年增加,道路基础设施建设及人们驾驶习惯的提升相对滞后,交通事故导致的人员伤亡、财产损失逐年增加。为了道路及车辆的行驶安全,城市道路、高速公路均要在每个路段设置车辆限速标志,以便提醒车辆驾驶员控制车速、谨慎驾驶,避免因为超速而造成违法甚至酿成交通事故。然而,当前方车辆较稀少的时候,车辆驾驶员往往会疏忽自己的驾驶速度,出现超速的现象。随着科技的发展,很多设备都会根据路段限速信息提示车辆驾驶员不要超速,但是常常因为新建道路、或临时更改等情况,会新增或更改道路的限速标志,造成数据的频繁更新,从而造成了数据更新不及时、或者数据错误,导致车辆驾驶员造成超速等违章事故。
发明内容
本发明实施例的目的在于提供限速标志识别方法及系统,旨在解决现有技术中因限速标志数据更新不及时所造成车辆驾驶员超速行驶的问题。
本发明实施例提供了限速标志识别方法,所述方法包括如下步骤:
通过车载摄像头获取图像;
根据预先建立的道路限速标志数据库,查找与所述图像所匹配的限速数据,所述限速数据包括限速类型、数值;
若查找到匹配的限速数据,则获取当前车辆行驶速度,并根据所述限速数据发出超速告警对驾驶员进行提示,以便驾驶员调节当前车辆行驶速度;若未查找到匹配的限速数据,则将所述图像通过无线网络上传服务器进行识别;以及
获取服务器识别成功的限速数据,更新至所述道路限速标志数据库中。
本发明实施例又提供了限速标志识别系统,所述系统包括:
图像获取单元,用于通过车载摄像头获取图像;
查找单元,用于根据预先建立的道路限速标志数据库,查找与所述图像所匹配的限速数据,所述限速数据包括限速类型、数值;
判断单元,用于若查找到匹配的限速数据,则获取当前车辆行驶速度,并根据所述限速数据发出超速告警对驾驶员进行提示,以便驾驶员调节当前车辆行驶速度;若未查找到匹配的限速数据,则将所述图像通过无线网络上传服务器进行识别;以及
数据更新单元,用于获取服务器识别成功的限速数据,更新至所述道路限速标志数据库中。
本发明实施例所提供的限速标志识别方法及系统,通过车载摄像头获取图像,根据图像与预先建立的道路限速标志数据库进行比对,发现没有匹配数据时,将图片上传服务器,当服务器获取到多个限速数据一致的图片时,形成了新的有效的限速数据,从而能够更新道路限速标志数据库,保证获取到最新的限速数据。
附图说明
图1为本发明实施例提供的限速标志识别方法的一种流程图;
图2为本发明实施例提供的限速标志识别系统的第一种结构示意图;
图3为本发明实施例提供的限速标志识别系统的第二种结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
图1示出了本发明实施例提供的限速标志识别方法的一种流程图,为了便于描述,仅示出了与本发明实施例相关的部分,本发明实施例提供的限速标志识别方法,所述方法包括如下步骤:
步骤S11,通过车载摄像头获取图像。
在本实施例中,所述通过车载摄像头获取图像,具体为:获取车载摄像头的视频流;对所述视频流提取多帧图像,对多帧图像进行逐帧识别。
一较佳实施例中,所述车载摄像头可以是高速彩色摄像头,通过高速彩色摄像头获得视频流,再经过分频器转变为两路视频流,其中一路视频流作为显示模块的输入直接用于显示;另外一路视频流经由采集卡进行定时采集,将视频流转换为多帧图像作为逐帧识别的图像;对多帧图像进行逐帧识别,得到识别出限速数据的图像。
又一实施例中,行车录像仪是可以记录车辆行驶途中的影像及声音等相关资讯的仪器,利用行车录像仪的车载摄像头获取图片,行车录像仪一般安装在车辆前视玻璃框的上沿正中位置,可采集车辆前方信息。
步骤S12,根据预先建立的道路限速标志数据库,查找与所述图像所匹配的限速数据,所述限速数据包括限速类型、数值。
具体地,限速标志一般采用荧光彩色图像标识,在红色圆圈内喷涂白色限速数字,驾驶员通过观察处于车辆正前上方的标志中的数字来掌握车辆在前方道路上的行驶速度,如该标志圆圈中的数字为“80”,表示此时驾驶员必须控制车速不得超过80km/h。通过将限速标志图像存储,用于判断行车录像仪获得的图像是否存在限速标志。
步骤S13,若查找到匹配的限速数据,则获取当前车辆行驶速度,并根据所述限速数据发出超速告警对驾驶员进行提示,以便驾驶员调节当前车辆行驶速度;若未查找到匹配的限速数据,则将所述图像通过无线网络上传服务器进行识别。
在本实施例中,将图像与预先建立的道路限速标志数据库进行对比,如果在数据库中找到匹配的限速数据,说明当前存在限速标志,如果图像并不存在于道路限速标志数据库,说明并不存在限速标志。
具体地,所述根据所述限速数据发出超速告警对驾驶员进行提示,以便驾驶员调节当前车辆行驶速度,具体为:将所述限速数据与当前车辆行驶速度进行比较,若当前车辆行驶速度小于所述限速数据,则不予处理;若当前车辆行驶速度大于所述限速数据,则发出超速告警对驾驶员进行提示,以便驾驶员调节当前至所述限速数据之内。
在本实施例中,当找到匹配的限速数据时,说明当前存在限速标志,将该限速数据与当前车辆行驶速度进行对比,如是限速标志上显示为80,那么当前路段的行驶限速是驾驶员必须控制车速不得超过80km/h,将当前车辆行驶速度与80km/h进行比较,如果当前的车速为70km/h,即小于当前限速数据,则不予处理。如果当前的车速为90km/h,即大于限速数据,则发出超速告警对驾驶员进行提示,以便驾驶员调整当前车速至80km/h之内。
进一步地,所述将所述图像通过无线网络上传服务器进行识别,具体为:通过无线网络获取所述图像,在服务器中查找与所述图像的限速类型、数值均一致的限速数据的数量;若与所述图像的限速类型、数值均一致的限速数据的数量达到设定数量,则所述图像的限速数据为识别成功的限速数据;否则为识别失败的限速数据。
步骤S14,获取服务器识别成功的限速数据,更新至所述道路限速标志数据库中。
在本实施例中,所述获取服务器识别成功的限速数据,更新至所述道路限速标志数据库中,具体为:将所述识别成功的限速数据形成更新数据包;在设定时间段内,通过无线网络获取所述更新数据包,更新至所述道路限速标志数据库中。
图2示出了本发明实施例提供的限速标志识别系统的第一种结构示意图,为了便于描述,仅示出了与本发明实施例相关的部分,本发明实施例提供的限速标志识别系统,所述系统包括:图像获取单元21、查找单元22、判断单元23及数据更新单元24。
具体地,所述图像获取单元21,用于通过车载摄像头获取图像;所述查找单元22,用于根据预先建立的道路限速标志数据库,查找与所述图像所匹配的限速数据,所述限速数据包括限速类型、数值;所述判断单元23,用于若查找到匹配的限速数据,则获取当前车辆行驶速度,并根据所述限速数据发出超速告警对驾驶员进行提示,以便驾驶员调节当前车辆行驶速度;若未查找到匹配的限速数据,则将所述图像通过无线网络上传服务器进行识别;所述数据更新单元24,用于获取服务器识别成功的限速数据,更新至所述道路限速标志数据库中。
在本实施例中,通过车载摄像头获取图像,根据图像在预先建立的道路限速标志数据库中进行进行检索比对,发现没有匹配数据时,将图片上传服务器,当服务器获取到多个限速数据一致的图片时,形成了新的有效的限速数据,从而能够更新道路限速标志数据库,保证获取到最新的限速数据。
图3示出了本发明实施例提供的限速标志识别系统的第二种结构示意图,为了便于描述,仅示出了与本发明实施例相关的部分,本发明实施例提供的限速标志识别系统,所述系统包括:图像获取单元21、查找单元22、判断单元23及数据更新单元24。
具体地,所述图像获取单元21,用于通过车载摄像头获取图像;所述查找单元22,用于根据预先建立的道路限速标志数据库,查找与所述图像所匹配的限速数据,所述限速数据包括限速类型、数值;所述判断单元23,用于若查找到匹配的限速数据,则获取当前车辆行驶速度,并根据所述限速数据发出超速告警对驾驶员进行提示,以便驾驶员调节当前车辆行驶速度;若未查找到匹配的限速数据,则将所述图像通过无线网络上传服务器进行识别;所述数据更新单元24,用于获取服务器识别成功的限速数据,更新至所述道路限速标志数据库中。
进一步地,所述图像获取单元21包括:视频流获取单元211,用于获取车载摄像头的视频流;图像提取单元212,用于对所述视频流提取多帧图像,对多帧图像进行逐帧识别。
进一步地,所述判断单元23包括车速告警单元231,用于:将所述限速数据与当前车辆行驶速度进行比较,若当前车辆行驶速度小于所述限速数据,则不予处理;若当前车辆行驶速度大于所述限速数据,则发出超速告警对驾驶员进行提示,以便驾驶员调整当前车速至所述限速数据之内。所述判断单元23还包括识别单元232,用于:通过无线网络获取所述图像,查找与所述图像的限速类型、数值均一致的限速数据的数量;若与所述图像的限速类型、数值均一致的限速数据的数量达到设定数量,则所述图像的限速数据为识别成功的限速数据;否则为识别失败的限速数据。
进一步地,所述数据更新单元24,具体用于:将所述识别成功的限速数据形成更新数据包;在设定时间段内,通过无线网络获取所述更新数据包,更新至所述道路限速标志数据库中。
以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下做出若干等同替代或明显变型,而且性能或用途相同,都应当视为属于本发明由所提交的权利要求书确定的专利保护范围。

Claims (10)

1.限速标志识别方法,其特征在于,所述方法包括如下步骤:
通过车载摄像头获取图像;
根据预先建立的道路限速标志数据库,查找与所述图像所匹配的限速数据,所述限速数据包括限速类型、数值;
若查找到匹配的限速数据,则获取当前车辆行驶速度,并根据所述限速数据发出超速告警对驾驶员进行提示,以便驾驶员调节当前车辆行驶速度;若未查找到匹配的限速数据,则将所述图像通过无线网络上传服务器进行识别;以及
获取服务器识别成功的限速数据,更新至所述道路限速标志数据库中。
2.如权利要求1所述限速标志识别方法,其特征在于,所述通过车载摄像头获取图像,具体为:
获取车载摄像头的视频流;以及
对所述视频流提取多帧图像,对多帧图像进行逐帧识别。
3.如权利要求1所述限速标志识别方法,其特征在于,所述根据所述限速数据发出超速告警对驾驶员进行提示,以便驾驶员调节当前车辆行驶速度,具体为:
将所述限速数据与当前车辆行驶速度进行比较,若当前车辆行驶速度小于所述限速数据,则不予处理;若当前车辆行驶速度大于所述限速数据,则发出超速告警对驾驶员进行提示,以便驾驶员调节当前至所述限速数据之内。
4.如权利要求1所述限速标志识别方法,其特征在于,所述将所述图像通过无线网络上传服务器进行识别,具体为:
通过无线网络获取所述图像,查找与所述图像的限速类型、数值均一致的限速数据的数量;以及
若与所述图像的限速类型、数值均一致的限速数据的数量达到设定数量,则所述图像的限速数据为识别成功的限速数据;否则为识别失败的限速数据。
5.如权利要求1所述限速标志识别方法,其特征在于,所述获取服务器识别成功的限速数据,更新至所述道路限速标志数据库中,具体为:
将所述识别成功的限速数据形成更新数据包;以及
在设定时间段内,通过无线网络获取所述更新数据包,更新至所述道路限速标志数据库中。
6.限速标志识别系统,其特征在于,所述系统包括:
图像获取单元,用于通过车载摄像头获取图像;
查找单元,用于根据预先建立的道路限速标志数据库,查找与所述图像所匹配的限速数据,所述限速数据包括限速类型、数值;
判断单元,用于若查找到匹配的限速数据,则获取当前车辆行驶速度,并根据所述限速数据发出超速告警对驾驶员进行提示,以便驾驶员调节当前车辆行驶速度;若未查找到匹配的限速数据,则将所述图像通过无线网络上传服务器进行识别;以及
数据更新单元,用于获取服务器识别成功的限速数据,更新至所述道路限速标志数据库中。
7.如权利要求6所述限速标志识别系统,其特征在于,所述图像获取单元包括:
视频流获取单元,用于获取车载摄像头的视频流;以及
图像提取单元,用于对所述视频流提取多帧图像,对多帧图像进行逐帧识别。
8.如权利要求6所述限速标志识别系统,其特征在于,所述判断单元包括车速告警单元,用于:
将所述限速数据与当前车辆行驶速度进行比较,若当前车辆行驶速度小于所述限速数据,则不予处理;若当前车辆行驶速度大于所述限速数据,则发出超速告警对驾驶员进行提示,以便驾驶员调整当前车速至所述限速数据之内。
9.如权利要求6所述限速标志识别系统,其特征在于,所述判断单元还包括识别单元,用于:
通过无线网络获取所述图像,查找与所述图像的限速类型、数值均一致的限速数据的数量;以及
若与所述图像的限速类型、数值均一致的限速数据的数量达到设定数量,则所述图像的限速数据为识别成功的限速数据;否则为识别失败的限速数据。
10.如权利要求6所述限速标志识别系统,其特征在于,所述数据更新单元,具体用于:
将所述识别成功的限速数据形成更新数据包;以及
在设定时间段内,通过无线网络获取所述更新数据包,更新至所述道路限速标志数据库中。
CN201510483217.7A 2015-08-07 2015-08-07 限速标志识别方法及系统 Pending CN105160919A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510483217.7A CN105160919A (zh) 2015-08-07 2015-08-07 限速标志识别方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510483217.7A CN105160919A (zh) 2015-08-07 2015-08-07 限速标志识别方法及系统

Publications (1)

Publication Number Publication Date
CN105160919A true CN105160919A (zh) 2015-12-16

Family

ID=54801756

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510483217.7A Pending CN105160919A (zh) 2015-08-07 2015-08-07 限速标志识别方法及系统

Country Status (1)

Country Link
CN (1) CN105160919A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106504557A (zh) * 2016-09-22 2017-03-15 深圳市元征科技股份有限公司 一种车速控制方法及移动终端
CN108242169A (zh) * 2016-12-23 2018-07-03 卢卡斯汽车股份有限公司 用于机动车的驾驶员辅助
CN108790935A (zh) * 2018-04-21 2018-11-13 浙江合众新能源汽车有限公司 基于导航地图的电动汽车主动限速控制系统
CN110070742A (zh) * 2019-05-29 2019-07-30 浙江吉利控股集团有限公司 高速匝道限速识别方法、系统及车辆
CN110648545A (zh) * 2018-06-26 2020-01-03 上海擎感智能科技有限公司 一种新交通规则的提醒方法、系统及车载终端
CN111325970A (zh) * 2018-12-14 2020-06-23 沈阳美行科技有限公司 一种道路限速提示方法、装置及相关设备
CN114093053A (zh) * 2020-07-01 2022-02-25 丰田自动车株式会社 信息处理方法、非临时性计算机可读取介质、车载装置、车辆、信息处理装置以及系统
CN114572275A (zh) * 2020-12-02 2022-06-03 晋城三赢精密电子有限公司 车辆行车辅助方法、车载装置、车辆及存储介质
CN115376331A (zh) * 2022-07-29 2022-11-22 中国第一汽车股份有限公司 限速信息的确定方法、装置及电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101469998A (zh) * 2007-12-27 2009-07-01 爱信艾达株式会社 地物信息收集装置及程序、自车位置识别装置和导航装置
CN101508299A (zh) * 2009-03-12 2009-08-19 上海交通大学 自动识别道路限速标志的车辆智能装置
CN101630444A (zh) * 2009-08-06 2010-01-20 杭州六易科技有限公司 一种车载交通信号牌自动识别警示系统
CN102620738A (zh) * 2011-01-27 2012-08-01 纳夫特克北美有限责任公司 交互式地理特征
CN103791908A (zh) * 2012-10-26 2014-05-14 罗伯特·博世有限公司 用于更新和用于检验导航数据库的数据记录的方法
CN103832282A (zh) * 2014-02-25 2014-06-04 长城汽车股份有限公司 一种汽车智能限速系统及汽车限速方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101469998A (zh) * 2007-12-27 2009-07-01 爱信艾达株式会社 地物信息收集装置及程序、自车位置识别装置和导航装置
US20090169055A1 (en) * 2007-12-27 2009-07-02 Aisin Aw Co., Ltd. Feature information collecting apparatus and feature information collecting program, and own vehicle position recognition apparatus and navigation apparatus
CN101508299A (zh) * 2009-03-12 2009-08-19 上海交通大学 自动识别道路限速标志的车辆智能装置
CN101630444A (zh) * 2009-08-06 2010-01-20 杭州六易科技有限公司 一种车载交通信号牌自动识别警示系统
CN102620738A (zh) * 2011-01-27 2012-08-01 纳夫特克北美有限责任公司 交互式地理特征
CN103791908A (zh) * 2012-10-26 2014-05-14 罗伯特·博世有限公司 用于更新和用于检验导航数据库的数据记录的方法
CN103832282A (zh) * 2014-02-25 2014-06-04 长城汽车股份有限公司 一种汽车智能限速系统及汽车限速方法

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106504557A (zh) * 2016-09-22 2017-03-15 深圳市元征科技股份有限公司 一种车速控制方法及移动终端
CN108242169A (zh) * 2016-12-23 2018-07-03 卢卡斯汽车股份有限公司 用于机动车的驾驶员辅助
CN108242169B (zh) * 2016-12-23 2022-04-15 采埃孚主动安全股份有限公司 机动车、驾驶员辅助系统和方法、计算机可读存储介质
CN108790935A (zh) * 2018-04-21 2018-11-13 浙江合众新能源汽车有限公司 基于导航地图的电动汽车主动限速控制系统
CN110648545A (zh) * 2018-06-26 2020-01-03 上海擎感智能科技有限公司 一种新交通规则的提醒方法、系统及车载终端
CN111325970A (zh) * 2018-12-14 2020-06-23 沈阳美行科技有限公司 一种道路限速提示方法、装置及相关设备
CN110070742A (zh) * 2019-05-29 2019-07-30 浙江吉利控股集团有限公司 高速匝道限速识别方法、系统及车辆
CN114093053A (zh) * 2020-07-01 2022-02-25 丰田自动车株式会社 信息处理方法、非临时性计算机可读取介质、车载装置、车辆、信息处理装置以及系统
CN114093053B (zh) * 2020-07-01 2024-01-16 丰田自动车株式会社 信息处理方法、非临时性计算机可读取介质、车载装置、车辆、信息处理装置以及系统
CN114572275A (zh) * 2020-12-02 2022-06-03 晋城三赢精密电子有限公司 车辆行车辅助方法、车载装置、车辆及存储介质
CN115376331A (zh) * 2022-07-29 2022-11-22 中国第一汽车股份有限公司 限速信息的确定方法、装置及电子设备

Similar Documents

Publication Publication Date Title
CN105160919A (zh) 限速标志识别方法及系统
JP6424761B2 (ja) 運転支援システム及びセンタ
US9335178B2 (en) Method for using street level images to enhance automated driving mode for vehicle
WO2021147637A1 (zh) 车道推荐方法、装置及车载通信设备
US20170131114A1 (en) Vehicle data processing method and vehicle terminal
CN103927886A (zh) 一种监管重点运输车辆超速违法的系统及方法
DE102019105307A1 (de) Dynamische merkmalsverfügbarkeitsabbildung für ein fahrzeug
CN103824457B (zh) 基于vanet的高速公路行车安全信息查询系统及查询方法
CA3006878A1 (en) Peer-to-peer virtual chalking
CN112543956B (zh) 提供道路拥堵原因的方法和装置
CN104065920A (zh) 一种车辆监控跟踪方法、系统及服务器
CN105307309B (zh) 一种照明控制方法及系统
CN104464289A (zh) 一种车辆违章时驾驶信息的识别方法
CN110400480B (zh) 基于交通通信站的交通信息处理方法、装置、设备和介质
CN103956067A (zh) 一种预防重点运输车辆的超速导致交通事故的系统及方法
CN110164145A (zh) 一种高速路况智能警示系统及其工作方法
CN105809095A (zh) 交通路口通行状态的确定
JP2012117944A (ja) ナビゲーション装置
CN110751133A (zh) 一种道路交通标志提示系统
CN102693640A (zh) 为设定车辆提供优先信号的控制系统及方法
CN108415051A (zh) 车辆位置信息的纠偏方法、装置和存储介质
CN102364560B (zh) 一种便于电子识别的交通标牌及其识别方法
CN111696375B (zh) 服务器设备和信息处理方法
CN104008654A (zh) 一种重点运输车辆的超速违法行为自动送达系统及方法
KR101875654B1 (ko) 도로전광표지판 정보 제공 시스템 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20151216

RJ01 Rejection of invention patent application after publication