RU2011135172A - Устройство и способ распознавания дорожных знаков - Google Patents

Устройство и способ распознавания дорожных знаков Download PDF

Info

Publication number
RU2011135172A
RU2011135172A RU2011135172/11A RU2011135172A RU2011135172A RU 2011135172 A RU2011135172 A RU 2011135172A RU 2011135172/11 A RU2011135172/11 A RU 2011135172/11A RU 2011135172 A RU2011135172 A RU 2011135172A RU 2011135172 A RU2011135172 A RU 2011135172A
Authority
RU
Russia
Prior art keywords
information
depending
road signs
user interface
road
Prior art date
Application number
RU2011135172/11A
Other languages
English (en)
Other versions
RU2571833C2 (ru
Inventor
Торстен ВЕЙ
Геральд ДЁРНЕ
Дирк ГУНИЯ
Марк РЁБЕР
Кристоф ШЛАУГ
Original Assignee
Форд Глобал Технолоджис, ЛЛК
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Форд Глобал Технолоджис, ЛЛК filed Critical Форд Глобал Технолоджис, ЛЛК
Publication of RU2011135172A publication Critical patent/RU2011135172A/ru
Application granted granted Critical
Publication of RU2571833C2 publication Critical patent/RU2571833C2/ru

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/09623—Systems involving the acquisition of information from passive traffic signs by means mounted on the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/582—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of traffic signs
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096708—Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control
    • G08G1/096716—Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control where the received information does not generate an automatic action on the vehicle control
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967—Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096766—Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission
    • G08G1/096783—Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission where the origin of the information is a roadside individual element
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/161—Decentralised systems, e.g. inter-vehicle communication
    • G08G1/163—Decentralised systems, e.g. inter-vehicle communication involving continuous checking

Abstract

1. Устройство распознавания дорожных знаков в транспортном средстве, содержащее по меньшей мере один датчик (10) изображений, а также устройство (40) пользовательского интерфейса, которое обрабатывает визуальные данные, полученные от датчика изображений и содержащие информацию о дорожных знаках с учетом ситуации на дороге и в окружающей среде, и передает обработанную информацию о дорожных знаках водителю (50) транспортного средства,отличающееся тем, чтоустройство (40) пользовательского интерфейса выполнено с возможностью обработки информацию о дорожных знаках в зависимости от параметра, описывающего состояние старения информации о дорожных знаках; при этом передача информации водителю (50) осуществляется различными способами в зависимости от состояния старения информации.2. Устройство по п.1,отличающееся тем, чтоустройство (40) пользовательского интерфейса выполнено с возможностью непрерывного варьирования способа передачи информации водителю (50) в зависимости от состояния старения.3. Устройство по п.1,отличающееся тем, чтоустройство (40) пользовательского интерфейса выполнено с возможностью обработки информации о дорожных знаках различными способами в зависимости от параметра, описывающего состояние старения информации о дорожных знаках, зависящего от типа дорожного знака, охарактеризованного информацией о дорожных знаках.4. Устройство по п.2,отличающееся тем, чтоустройство (40) пользовательского интерфейса выполнено с возможностью обработки информации о дорожных знаках различными способами в зависимости от параметра, описывающего состояние старения информации о дорожных знаках, зависящего от типа доро

Claims (9)

1. Устройство распознавания дорожных знаков в транспортном средстве, содержащее по меньшей мере один датчик (10) изображений, а также устройство (40) пользовательского интерфейса, которое обрабатывает визуальные данные, полученные от датчика изображений и содержащие информацию о дорожных знаках с учетом ситуации на дороге и в окружающей среде, и передает обработанную информацию о дорожных знаках водителю (50) транспортного средства,
отличающееся тем, что
устройство (40) пользовательского интерфейса выполнено с возможностью обработки информацию о дорожных знаках в зависимости от параметра, описывающего состояние старения информации о дорожных знаках; при этом передача информации водителю (50) осуществляется различными способами в зависимости от состояния старения информации.
2. Устройство по п.1,
отличающееся тем, что
устройство (40) пользовательского интерфейса выполнено с возможностью непрерывного варьирования способа передачи информации водителю (50) в зависимости от состояния старения.
3. Устройство по п.1,
отличающееся тем, что
устройство (40) пользовательского интерфейса выполнено с возможностью обработки информации о дорожных знаках различными способами в зависимости от параметра, описывающего состояние старения информации о дорожных знаках, зависящего от типа дорожного знака, охарактеризованного информацией о дорожных знаках.
4. Устройство по п.2,
отличающееся тем, что
устройство (40) пользовательского интерфейса выполнено с возможностью обработки информации о дорожных знаках различными способами в зависимости от параметра, описывающего состояние старения информации о дорожных знаках, зависящего от типа дорожного знака, охарактеризованного информацией о дорожных знаках.
5. Устройство по п.1,
отличающееся тем, что
параметр, описывающий состояние старения информации о дорожных знаках, определяется различными способами в зависимости от наличия и, при необходимости, от типа дополнительного дорожного знака, описываемого информацией о дорожном знаке.
6. Устройство по п.1,
отличающееся тем, что
устройство (40) пользовательского интерфейса дополнительно выполнено с возможностью динамического корректирования параметра, описывающего состояние старения информации о дорожных знаках, в зависимости от скорости движения транспортного средства.
7. Устройство по п.1,
отличающееся тем, что
устройство (40) пользовательского интерфейса дополнительно выполнено с возможностью одновременного отображению водителю информации, по меньшей мере, о двух дорожных знаках в двух различных местах дисплея.
8. Устройство по п.7,
отличающееся тем, что
параметр, описывающий состояние старения информации о дорожных знаках, определяется различным образом для указанных мест дисплея.
9. Способ распознавания дорожных знаков в транспортном средстве, в частности, для осуществления устройством по одному из предыдущих пунктов, в котором визуальные данные, содержащие информацию о дорожных знаках, принимают, по меньшей мере, одним датчиком (10) изображения и обрабатывают устройством (40) пользовательского интерфейса с учетом дорожной ситуации и/или условий окружающей среды, а обработанную информацию передают водителю (50) транспортного средства,
отличающийся тем, что
информацию о дорожных знаках обрабатывают в зависимости от параметра, описывающего состояние старения информации о дорожных знаках, а передачу обработанной информации водителю (50) осуществляют различными способами в зависимости от состояния старения.
RU2011135172/11A 2010-08-23 2011-08-23 Устройство и способ распознавания дорожных знаков RU2571833C2 (ru)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102010039634A DE102010039634B4 (de) 2010-08-23 2010-08-23 Anordnung und Verfahren zur Verkehrszeichenerkennung
DE102010039634.6 2010-08-23

Publications (2)

Publication Number Publication Date
RU2011135172A true RU2011135172A (ru) 2013-02-27
RU2571833C2 RU2571833C2 (ru) 2015-12-20

Family

ID=45557427

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2011135172/11A RU2571833C2 (ru) 2010-08-23 2011-08-23 Устройство и способ распознавания дорожных знаков

Country Status (4)

Country Link
US (2) US9218535B2 (ru)
CN (1) CN102376166B (ru)
DE (1) DE102010039634B4 (ru)
RU (1) RU2571833C2 (ru)

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102012221159A1 (de) 2012-11-20 2014-05-22 Robert Bosch Gmbh Verfahren und Vorrichtung zum Erkennen von Wechselverkehrszeichen
DE102012024613A1 (de) * 2012-12-17 2014-06-18 GM Global Technology Operations LLC (n. d. Gesetzen des Staates Delaware) Verfahren zum Betreiben eines Kraftfahrzeugs und Kraftfahrzeug
CN103065489B (zh) * 2012-12-28 2015-10-21 天津爱迪尔软件开发有限公司 一种即时导航路况系统及导航方法
US8880237B2 (en) * 2013-01-04 2014-11-04 International Business Machines Corporation Intelligent road signs
JP6115278B2 (ja) * 2013-04-16 2017-04-19 株式会社デンソー 車両用表示装置
US20140327772A1 (en) * 2013-05-03 2014-11-06 Magna Electrics Inc. Vehicle vision system with traffic sign comprehension
EP3217321B1 (en) * 2013-07-31 2019-08-28 Honda Motor Co., Ltd. Sign information output apparatus
JP5917456B2 (ja) * 2013-07-31 2016-05-18 本田技研工業株式会社 標識情報出力装置
DE102013217531A1 (de) * 2013-09-03 2015-03-05 Robert Bosch Gmbh Fahrerinformationssystem zur Ausgabe von Hinweisen an einen Fahrzeugführer
DE112013007590T5 (de) * 2013-11-12 2016-08-18 Mitsubishi Electric Corporation Fahrunterstützungsbild-Erzeugungsvorrichtung, Fahrunterstützungsbild-Anzeigevorrichtung, Fahrunterstützungsbild-Anzeigesystem und Fahrunter-stützungsbild-Erzeugungsprogramm
CN105723431B (zh) * 2013-11-12 2019-02-05 三菱电机株式会社 驾驶辅助图像生成装置、显示装置、显示系统及生成方法
JP6251577B2 (ja) * 2014-01-17 2017-12-20 矢崎エナジーシステム株式会社 車載情報記録装置
JP6243780B2 (ja) * 2014-03-28 2017-12-06 株式会社Ｓｕｂａｒｕ 車外環境認識装置
KR20150121977A (ko) * 2014-04-22 2015-10-30 주식회사 만도 교통표지판 인식장치 및 그의 제한속도 출력방법
US9336448B2 (en) * 2014-08-11 2016-05-10 Here Global B.V. Variable speed sign value prediction and confidence modeling
DE102014113079A1 (de) * 2014-09-11 2016-03-17 Valeo Schalter Und Sensoren Gmbh Verfahren zum Darstellen von Objektinformationen auf einer Anzeigeeinheit eines Kraftfahrzeugs, Fahrerassistenzsystem und Kraftfahrzeug
WO2016058634A1 (en) * 2014-10-14 2016-04-21 Toyota Motor Europe Nv/Sa Systems and methods for traffic sign assistance
US10573175B2 (en) 2014-10-14 2020-02-25 Toyota Motor Europe Systems and methods for traffic sign validation
FR3027721B1 (fr) * 2014-10-24 2020-08-07 Peugeot Citroen Automobiles Sa Procede et systeme de visualisation augmentee de panneaux routiers
KR20160049721A (ko) * 2014-10-28 2016-05-10 현대자동차주식회사 자동차의 디스플레이 시스템 및 그 제어 방법
CN104463105B (zh) * 2014-11-19 2017-11-03 清华大学 路牌识别方法及装置
US9459626B2 (en) 2014-12-11 2016-10-04 Here Global B.V. Learning signs from vehicle probes
JP6062473B2 (ja) * 2015-03-17 2017-01-18 本田技研工業株式会社 道路標識判断装置及び道路標識判断方法
JP6154839B2 (ja) * 2015-03-18 2017-06-28 本田技研工業株式会社 道路標識判断装置及び道路標識判断方法
JP6319173B2 (ja) * 2015-05-11 2018-05-09 トヨタ自動車株式会社 車両の規制速度表示装置
JP6187534B2 (ja) 2015-05-11 2017-08-30 トヨタ自動車株式会社 車両の規制速度表示装置
JP6304126B2 (ja) * 2015-05-26 2018-04-04 トヨタ自動車株式会社 車両制御システム
JP6396850B2 (ja) * 2015-05-29 2018-09-26 株式会社デンソー 運転支援装置及び運転支援方法
JP6425622B2 (ja) * 2015-06-12 2018-11-21 日立建機株式会社 車載装置、車両衝突防止方法
CN104899581A (zh) * 2015-06-30 2015-09-09 北京奇虎科技有限公司 基于行车记录仪的信息读取方法及装置
JP6432491B2 (ja) * 2015-11-20 2018-12-05 トヨタ自動車株式会社 運転支援装置
JP2017097682A (ja) * 2015-11-26 2017-06-01 マツダ株式会社 標識認識システム
JP6255002B2 (ja) * 2015-12-22 2017-12-27 本田技研工業株式会社 車両用標識表示装置及び方法
JP6265965B2 (ja) * 2015-12-22 2018-01-24 本田技研工業株式会社 車両用標識表示装置及び方法
JP6317315B2 (ja) * 2015-12-22 2018-04-25 本田技研工業株式会社 標識情報表示装置及び方法
US9937923B2 (en) * 2016-01-30 2018-04-10 Bendix Commercial Vehicle Systems Llc System and method for providing a speed warning and speed control
WO2017145945A1 (ja) * 2016-02-25 2017-08-31 京セラ株式会社 ステレオカメラ装置、車両および視差算出方法
DE102016208621A1 (de) * 2016-05-19 2017-11-23 Continental Automotive Gmbh Verfahren zur Verifizierung von Inhalt und Aufstellort von Verkehrszeichen
US10254123B2 (en) 2016-05-24 2019-04-09 Telenav, Inc. Navigation system with vision augmentation mechanism and method of operation thereof
CA3041177C (en) * 2016-10-13 2021-08-31 Nissan Motor Co., Ltd. Self position estimation method and self position estimation device
US10528055B2 (en) * 2016-11-03 2020-01-07 Ford Global Technologies, Llc Road sign recognition
US10552692B2 (en) * 2017-09-19 2020-02-04 Ford Global Technologies, Llc Color learning
JP2019066963A (ja) * 2017-09-28 2019-04-25 株式会社デンソー 運転支援装置および運転支援方法
US10657394B2 (en) 2018-07-12 2020-05-19 Here Global B.V. Method and system for handling misclassification of speed signs
CN111169403A (zh) * 2018-11-13 2020-05-19 上海博泰悦臻网络技术服务有限公司 车辆控制方法以及车辆
US11030898B2 (en) * 2018-12-13 2021-06-08 Here Global B.V. Methods and systems for map database update based on road sign presence
US11605232B2 (en) * 2020-08-27 2023-03-14 Robert Bosch Gmbh System and method for road sign ground truth construction with a knowledge graph and machine learning
CN114572275A (zh) * 2020-12-02 2022-06-03 晋城三赢精密电子有限公司 车辆行车辅助方法、车载装置、车辆及存储介质
RU2760038C1 (ru) * 2021-06-02 2021-11-22 Олег Борисович Лапшев Способ распознавания дорожных знаков
CN115394077B (zh) * 2022-08-18 2023-10-27 中国第一汽车股份有限公司 限速信息确定方法、装置及非易失性存储介质

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE29610677U1 (de) 1996-06-18 1996-09-12 Terbrack Leo Dipl Ing Anordnung zur Anzeige von Verkehrshinweisen
DE19736774A1 (de) * 1997-08-23 1999-02-25 Bosch Gmbh Robert Verfahren zur Informationsanzeige in einem Kraftfahrzeug
DE19829162A1 (de) 1998-06-30 2000-01-05 Erwin Dietz Verwendung einer elektronischen Kamera und einer mit ihr zusammenarbeitenden Bilderkennungseinrichtung in einem Automobil zum Erkennen von Verkehrszeichen
DE19852631C2 (de) 1998-11-14 2001-09-06 Daimler Chrysler Ag Vorrichtung und Verfahren zur Verkehrszeichenerkennung
US6674878B2 (en) * 2001-06-07 2004-01-06 Facet Technology Corp. System for automated determination of retroreflectivity of road signs and other reflective objects
WO2002015144A2 (en) * 2000-08-12 2002-02-21 Facet Technology Corp. System for road sign sheeting classification
US7068844B1 (en) * 2001-11-15 2006-06-27 The University Of Connecticut Method and system for image processing for automatic road sign recognition
ATE326748T1 (de) * 2002-07-09 2006-06-15 Accenture Global Services Gmbh Vorrichtung zur automatischen erkennung von verkehrszeichen
US8121635B1 (en) * 2003-11-22 2012-02-21 Iwao Fujisaki Communication device
US7466841B2 (en) * 2004-08-16 2008-12-16 Siemens Corporate Research, Inc. Method for traffic sign detection
DE102004042382B4 (de) * 2004-09-02 2013-03-07 Robert Bosch Gmbh Verfahren und System zum Hinweis auf Verkehrszeichen
DE102005048336A1 (de) * 2005-10-10 2007-04-12 Robert Bosch Gmbh Verfahren und System zur Unterstützung des Fahrers eines Kraftfahrzeugs bei der Erkennung der Umgebung des Kraftfahrzeugs
DE102006008656A1 (de) * 2006-02-24 2007-08-30 Audi Ag Kraftfahrzeug mit einer Einrichtung zur Verkehrszeichenerkennung
JP2008287379A (ja) 2007-05-16 2008-11-27 Hitachi Ltd 道路標識データ入力システム
US8233670B2 (en) * 2007-09-13 2012-07-31 Cognex Corporation System and method for traffic sign recognition
JP4831434B2 (ja) * 2007-12-27 2011-12-07 アイシン・エィ・ダブリュ株式会社 地物情報収集装置及び地物情報収集プログラム、並びに自車位置認識装置及びナビゲーション装置
RU2369905C1 (ru) * 2008-01-09 2009-10-10 Государственное образовательное учреждение высшего профессионального образования "Алтайский государственный технический университет им. И. И. Ползунова" (АлтГТУ) Устройство для повышения безопасности дорожного движения
US8131018B2 (en) * 2008-02-08 2012-03-06 Tk Holdings Inc. Object detection and recognition system
DE102008010968A1 (de) * 2008-02-25 2009-09-17 Robert Bosch Gmbh Anzeige eines relevanten Verkehrszeichens oder einer relevanten Verkehrseinrichtung
US8204277B2 (en) * 2008-07-18 2012-06-19 GM Global Technology Operations LLC Apparatus and method for camera-bases lane marker detection
DE102008043743A1 (de) * 2008-11-14 2010-05-20 Robert Bosch Gmbh Verfahren und Steuergerät zur Auswertung eines Sensorsignals
DE102008057675A1 (de) * 2008-11-17 2009-07-02 Daimler Ag Verfahren zur Verkehrszeichenerkennung
JP5361541B2 (ja) * 2009-06-02 2013-12-04 三菱電機株式会社 標識認識装置
CN101702197A (zh) * 2009-10-26 2010-05-05 宁波大学 一种道路交通标志的检测方法

Also Published As

Publication number Publication date
DE102010039634B4 (de) 2013-05-08
US20120046855A1 (en) 2012-02-23
RU2571833C2 (ru) 2015-12-20
CN102376166A (zh) 2012-03-14
CN102376166B (zh) 2016-08-03
US9536156B2 (en) 2017-01-03
DE102010039634A1 (de) 2012-02-23
US9218535B2 (en) 2015-12-22
US20140300741A1 (en) 2014-10-09

Similar Documents

Publication Publication Date Title
RU2011135172A (ru) Устройство и способ распознавания дорожных знаков
US20170160392A1 (en) Camera augmented bicycle radar sensor system
RU2015138333A (ru) Связь электровелосипеда с инфраструктурой или транспортным средством
WO2008080976A3 (de) Fahrerassistenzsystem zur verkehrszeichenerkennung
WO2013111093A8 (en) Method, apparatus, and computer program product for short-range communication based direction finding
WO2020128455A3 (en) Method and system for determining driving information
HU0700652D0 (en) Device for indicating motion parameters of a vehicle by light signs
RU2011102554A (ru) Способ и устройство навигации
EP2733005A3 (en) Vehicular display system
WO2014151153A3 (en) Mapping application search function
WO2009011839A3 (en) System and method for identifying portions of roads
WO2015082907A3 (en) Receiver for communications systems
DE60315821D1 (de) Fahrzeugnavigationssystem
US10255472B2 (en) Apparatus and method for transmitting traffic-related data in road traffic
MX2016014885A (es) Aparato de reconocimiento de señales de trafico y metodo de reconocimiento de señales de trafico.
WO2018215242A3 (de) Verfahren zur ermittlung einer fahranweisung
GB201305097D0 (en) Vehicle speedometer and related method
ATE485579T1 (de) Verfahren und vorrichtung zur bilddarstellung
EP2637137A3 (en) Image processing apparatus and method for processing image thereof
TW200802092A (en) Electronic devices and methods for managing mass storage devices
CN104504924A (zh) 一种路口用车载路况显示系统
EP2957448A2 (en) Display control apparatus, display control method, display control program, and display apparatus
CN115427761A (zh) 车辆行驶引导方法和电子装置
TW200731172A (en) Method for vehicle alarm and system thereof
RU2009101907A (ru) Способ повышения безопасности дорожного движения путем передачи изображений дорожных знаков и сигналов светофора на транспортное средство посредством электромагнитных волн

Legal Events

Date Code Title Description
HE9A Changing address for correspondence with an applicant
MM4A The patent is invalid due to non-payment of fees

Effective date: 20180824