RU2519286C2 - Способ бесконтактного управления компьютером (варианты) - Google Patents
Способ бесконтактного управления компьютером (варианты) Download PDFInfo
- Publication number
- RU2519286C2 RU2519286C2 RU2008102945/08A RU2008102945A RU2519286C2 RU 2519286 C2 RU2519286 C2 RU 2519286C2 RU 2008102945/08 A RU2008102945/08 A RU 2008102945/08A RU 2008102945 A RU2008102945 A RU 2008102945A RU 2519286 C2 RU2519286 C2 RU 2519286C2
- Authority
- RU
- Russia
- Prior art keywords
- control
- cursor
- contactless
- dimensional
- computer
- Prior art date
Links
Landscapes
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Изобретение относится к способу ввода информации в вычислительной технике с помощью устройств ручного ввода информации. Техническим результатом является повышение эффективности выполнения управляющих действий на экране монитора с помощью бесконтактного управления. Способ бесконтактного управления компьютером заключается в том, что в режиме работы устройства бесконтактного управления курсором осуществляют отслеживание изменения положения управляющей кисти руки, которая находится в рабочей зоне действия системы датчиков управления курсором, по результатам которого осуществляют управление перемещением курсора, выполняют управляющее действие, отличающийся тем, что как систему бесконтактного ввода трехмерной информации в компьютер используют систему в составе компьютера, оснащенного устройством бесконтактного управления курсором трехмерным объектом управления, при этом трехмерное отслеживание изменения положения управляющей кисти руки в рабочей зоне действия системы датчиков устройства бесконтактного управления курсором и трехмерное отслеживание изменения конфигурации управляющей кисти руки и взаиморасположения ее пальцев осуществляют или одновременно, или последовательно, выполняют управляющее действие по результатам этого отслеживания. 2 н.п. ф-лы.
Description
Изобретение относится к способу ввода информации в вычислительной технике с помощью устройств ручного ввода информации и может быть использовано в персональных компьютерах и в других компьютерных системах в работе с разными программами и, в особенности, с графическими редакторами.
Известен патент Украины №37742 «Способ управления курсором и устройство для его осуществления», MПK G06F 3/03, опубл. 16.08.2004, бюл. №8 - 2004, владелец патента Боянжу Ю.М.
При выполнении этого способа в режиме работы устройства бесконтактного управления курсором осуществляют отслеживание изменения положения управляющей кисти руки, которая находится в рабочей зоне действия системы датчиков управления курсором, по результатам отслеживания изменения положения управляющей кисти руки осуществляют управление перемещением курсора, выполняют управляющее действие. Этот способ управления курсором с помощью системы датчиков устройства бесконтактного управления курсором, при осуществлении отслеживания изменения положения управляющей кисти руки, позволяет выполнять бесконтактно только перемещение курсора, но не позволяет выполнять управляющее действие без нажатия клавиш устройства бесконтактного управления курсором, имитирующих действие левой и правой кнопок «мыши», что не совсем удобно.
Известен патент Украины №37742 «Способ управления курсором и устройство для его осуществления», MПK G06F 3/03, опубл. 16.08.2004, бюл. №8 - 2004, владелец патента Боянжу Ю.М.
При выполнении этого способа в режиме работы устройства бесконтактного управления курсором осуществляют отслеживание изменения положения управляющей кисти руки, которая находится в рабочей зоне действия системы датчиков управления курсором, по результатам отслеживания изменения положения управляющей кисти руки осуществляют управление перемещением курсора, выполняют управляющее действие и при этом осуществляют выбор соответствующего инструмента для выполнения графического построения и выполняют непосредственно графическое построение, для чего нажимают клавиши устройства бесконтактного управления курсором, которые исполняют роль левой и правой кнопок «мыши». Этот способ управления курсором с помощью системы датчиков устройства бесконтактного управления курсором, при осуществлении отслеживания изменения положения управляющей кисти руки, позволяет выполнять бесконтактно только перемещение курсора, но не позволяет осуществлять выбор соответствующего инструмента для выполнения графического построения и выбор режима работы этого инструмента. При выполнении графической работы, например при рисовании, это не совсем удобно.
Изобретение «Способ бесконтактного управления компьютером» направлено на решение задачи путем одновременного трехмерного отслеживания изменения положения управляющей кисти руки, изменения ее конфигурации и взаиморасположения ее пальцев в рабочей зоне действия системы датчиков управления курсором, осуществления управляющего действия без нажатия клавиш устройства бесконтактного управления курсором, имитирующих действие левой и правой кнопок «мыши», по результатам трехмерного отслеживания изменения конфигурации управляющей кисти руки и взаиморасположения ее пальцев, а во втором варианте при управлении перемещением курсора одновременно осуществляют управляющее действие по результатам этого трехмерного отслеживания и, при этом, выбирают соответствующий инструмент для выполнения графического построения из меню графического редактора или офисных приложений, а осуществление выбора режима работы этого инструмента при выполнении графического построения выполняют изменением наклона управляющей кисти руки, или изменением расстояния до нее относительно системы датчиков управления курсором устройства бесконтактного управления курсором, - обеспечить удобство и эффективность выполнения управляющих действий на экране монитора, в том числе и осуществление графического построения, с помощью бесконтактного управления, которое придает устройству ручного ввода информации компьютерной системы новые потребительские свойства.
Суть способа по первому варианту. Следующее известно. В режиме работы устройства бесконтактного управления курсором осуществляют отслеживание изменения положения управляющей кисти руки, которая находится в рабочей зоне действия системы датчиков управления курсором, по результатам отслеживания изменения положения управляющей кисти руки осуществляют управление перемещением курсора, выполняют управляющее действие. Следующее новое. При трехмерном отслеживании изменения положения управляющей кисти руки в рабочей зоне действия системы датчиков управления курсором, одновременно, дополнительно осуществляют трехмерное отслеживание изменения конфигурации управляющей кисти руки и взаиморасположения ее пальцев, а выполнение управляющего действия осуществляют без нажатия клавиш устройства бесконтактного управления курсором, имитирующих действие левой и правой кнопок «мыши», по результату трехмерного отслеживания изменения конфигурации управляющей кисти руки и взаиморасположения ее пальцев.
Технический результат. Одновременное осуществление трехмерного отслеживания изменений положения управляющей кисти руки, ее конфигурации и взаиморасположения ее пальцев дает возможность расширить круг возможностей пользователя по управлению компьютером, то есть выполнять стандартные действия по управлению компьютером новым бесконтактным способом. Это также обеспечивает выполнение управляющего действия без нажатия клавиш устройства бесконтактного управления курсором, имитирующих действие левой и правой кнопок «мыши», по результатам трехмерного отслеживания изменения положения управляющей кисти руки, ее конфигурации и взаиморасположения ее пальцев. Вся совокупность новых существенных признаков обеспечивает бесконтактное управление компьютером, оснащенным устройством бесконтактного управления курсором при осуществлении разного рода управляющих действий, и придает устройству ручного ввода информации компьютера новые потребительские свойства. Например, управление компьютером без физического доступа к нему.
Суть способа по второму варианту. Следующее известно. В режиме работы устройства бесконтактного управления курсором осуществляют отслеживание изменения положения управляющей кисти руки, которая находится в рабочей зоне действия системы датчиков управления курсором, по результатам отслеживания изменения положения управляющей кисти руки осуществляют управление перемещением курсора, выполняют управляющее действие и при этом осуществляют выбор соответствующего инструмента для выполнения графического построения и выполняют непосредственно графическое построение, для чего нажимают клавиши устройства бесконтактного управления курсором, которые выполняют роль левой и правой кнопок «мыши». Следующее новое. При трехмерном отслеживании изменения положения управляющей кисти руки в рабочей зоне действия системы датчиков управления курсором, одновременно, дополнительно осуществляют трехмерное отслеживание изменения конфигурации управляющей кисти руки и взаиморасположения ее пальцев, по результатам этого трехмерного отслеживания при управлении перемещением курсора, одновременно, дополнительно осуществляют управляющее действие, и при этом выбирают соответствующий инструмент для выполнения графического построения из меню графического редактора или офисных приложений, а при выполнении графического построения дополнительно осуществляют выбор режима работы этого инструмента, для чего или изменяют наклон управляющей кисти руки, или изменяют расстояние до нее относительно системы датчиков управления курсором устройства бесконтактного управления курсором.
Технический результат. Данный способ управления компьютером при осуществлении графического построения осуществляется за счет бесконтактных манипуляций управляющей кисти руки в рабочей зоне действия системы датчиков управления курсором, которые позволяют выбрать соответствующий инструмент для осуществления графического построения, например кисть, ручку, распылитель, карандаш или символы на клавиатуре; режимы работы выбранного соответствующего инструмента, например рисование кистью, которая может менять наклон к плоскости бумаги, толщину линии, цвет. Все это позволяет художнику естественным движением кисти руки при выполнении графических построений, согласно способу, осуществлять одновременное движение по трем координатам выбранным инструментом и выполнять изменение угла его наклона. Бесконтактное управление компьютером с целью выполнения графического построения осуществляется за счет совокупности таких новых признаков, как трехмерное отслеживание изменения конфигурации управляющей кисти руки и взаиморасположения ее пальцев, расположенной в рабочей зоне действия системы датчиков управления курсором, а также осуществление управления движением по трем координатам выбранного из меню графического редактора или офисных приложений соответствующего инструмента для выполнения графического построения и режимами его работы по результатам этого трехмерного отслеживания.
То есть при изменении конфигурации управляющей кисти руки и взаиморасположения ее пальцев осуществляется выбор соответствующего инструмента и на экране монитора отображаются результаты взаимодействия с этим инструментом. Бесконтактное управление компьютером, оснащенным устройством бесконтактного управления курсором при осуществлении графического построения, придает устройству ручного ввода информации компьютера новые потребительские свойства. Например, возможность при осуществлении компьютерного графического построения эффективно использовать творческие возможности художника, так как художник осуществляет рисование на мониторе компьютера естественным движением руки.
Способ по первому варианту состоит из следующих операций: одновременно осуществляют трехмерное отслеживание изменения положения управляющей кисти руки, изменения ее конфигурации и взаиморасположения ее пальцев в рабочей зоне действия системы датчиков управления курсором; осуществляют управление перемещением курсора по результатам отслеживания изменения положения управляющей кисти руки; осуществляют управляющее действие без нажатия клавиш устройства бесконтактного управления курсором, имитирующих действие левой и правой кнопок «мыши», по результатам трехмерного отслеживания конфигурации управляющей кисти руки и взаиморасположения ее пальцев.
При осуществлении этого способа используют устройство бесконтактного управления курсором (патент Украины №37742 «Способ управления курсором и устройство для его осуществления») и специальную программу (нестандартный драйвер) для трехмерного отслеживания изменения конфигурации управляющей кисти руки и взаиморасположения ее пальцев по типу специальной программы, например типа «машинное зрение», которые должны быть запущены и функционировать во время выполнения этих операций.
Пример по первому варианту. Например, необходимо осуществить бесконтактно определенные управляющие действия на экране монитора компьютерной системы, в составе программного обеспечения которой есть специальная программа (нестандартный драйвер) для трехмерного отслеживания изменения конфигурации управляющей кисти руки и взаиморасположения ее пальцев, а также которая оборудована устройством бесконтактного управления курсором. Например, необходимо бесконтактно установить курсор на пиктограмму некоторого приложения и запустить это приложение, или «перетянуть» какой-либо графический объект с одного места на другое. Осуществляют управление перемещением курсора. Для этого изменяют положение управляющей кисти руки, расположенной в рабочей зоне действия системы датчиков управления курсором, относительно этой системы датчиков, и тем самым определяют позицию курсора на необходимой пиктограмме. Выполняют управляющее действие. Для этого изменяют конфигурацию управляющей кисти руки и взаиморасположение ее пальцев, относительно которой программа драйвер сможет сделать вывод о наступлении так называемого события «click» или двойной «click». Например, такая конфигурация кисти руки, - собрать пальцы один к одному, будто берешь щепотку соли. Таким образом, на экране монитора состоится запуск приложения, избранного пользователем. Например, выполнение другой задачи, - «перетягивание» объекта (операция - Drag and Drop). Это действие делается аналогично: изменяют положение управляющей кисти руки и наводят курсор на пиктограмму; изменяют конфигурацию управляющей кисти руки и взаиморасположение ее пальцев для создания программой-драйвером события «одиночный click». Таким образом, делают «захват» объекта, и движением руки в воздухе, то есть изменяя ее положение относительно системы датчиков управления курсором, «перетягивают» объект на новое место, не изменяя при этом конфигурацию управляющей кисти руки. После этого объект «отпускают», для чего изменяют конфигурацию управляющей кисти руки в зоне действия системы датчиков управления курсором для создания программой-драйвером события «отпускание кнопки мыши».
Способ по второму варианту состоит из следующих операций: осуществляют трехмерное отслеживание изменения положения, изменения конфигурации управляющей кисти руки, которая находится в рабочей зоне действия системы датчиков управления курсором, и взаиморасположения ее пальцев; осуществляют при управлении перемещением курсора, одновременно, управляющее действие по результатам этого трехмерного отслеживания, и при этом выбирают соответствующий инструмент для выполнения графического построения, для чего нажимают клавиши устройства бесконтактного управления курсором, которые выполняют роль левой и правой кнопок «мыши»; осуществляют выбор режима работы этого инструмента при выполнении графического построения, для чего или изменяют наклон управляющей кисти руки, или изменяют расстояние до нее относительно системы датчиков управления курсором устройства бесконтактного управления курсором.
При осуществлении этого способа используют устройство бесконтактного управления курсором (патент Украины №37742 «Способ управления курсором и устройство для его осуществления»), а также специальную программу (нестандартный драйвер) для трехмерного отслеживания изменения конфигурации управляющей кисти руки и взаиморасположения ее пальцев по типу специальной программы, например типа «машинное зрение», которые должны быть запущены и функционировать во время выполнения этих операций.
Пример по второму варианту. Например, необходимо выполнить графическое построение с помощью инструментов, кисточки или распылителя, расположенных на панели инструментов графического редактора, с помощью компьютерной системы, в составе программного обеспечения которой есть специальная программа (нестандартный драйвер) для трехмерного отслеживания изменения конфигурации управляющей кисти руки и взаиморасположения ее пальцев, а также которая оборудована устройством бесконтактного управления курсором. Для этого изменяют положение управляющей кисти руки, которая при этом находится в рабочей зоне действия системы датчиков управления курсором, относительно этой системы датчиков, и этим определяют позицию курсора. Изменяют конфигурацию управляющей кисти руки и расположение ее пальцев, и при этом осуществляют выбор соответствующего инструмента, например кисточки; изменяют положение управляющей кисти руки с сохранением конфигурации кисти руки и взаиморасположения ее пальцев, и при этом осуществляют графическое построение, и на экране монитора отображаются результаты взаимодействия с кисточкой. При необходимости изменения режима работы кисточки, например изменения приемов нанесения мазков, изменяют наклон управляющей кисти руки относительно системы датчиков управления курсором устройства бесконтактного управления курсором.
Предложенные способы расширяют возможности компьютерных систем и придают им новые потребительские свойства. Они применимы для любых информационных и игровых интерактивных устройств, таких как информационно-справочные терминалы, банкоматы, пункты коллективного доступа в Интернет, рекламные видеоэкраны, игровые приставки и автоматы, терминалы мобильной связи, портативные компьютеры, демонстрационные смарт-доски для учебного процесса или для работы художника или дизайнера.
Claims (2)
1. Способ бесконтактного управления компьютером, при котором в режиме работы устройства бесконтактного управления курсором осуществляют отслеживание изменения положения управляющей кисти руки, которая находится в рабочей зоне действия системы датчиков управления курсором, по результатам отслеживания изменения положения управляющей кисти руки осуществляют управление перемещением курсора, выполняют управляющее действие, отличающийся тем, что как систему бесконтактного ввода трехмерной информации в компьютер используют систему в составе компьютера, оснащенного устройством бесконтактного управления курсором трехмерным объектом управления, при этом трехмерное отслеживание изменения положения управляющей кисти руки в рабочей зоне действия системы датчиков устройства бесконтактного управления курсором и трехмерное отслеживание изменения конфигурации управляющей кисти руки и взаиморасположения ее пальцев осуществляют или одновременно, или последовательно, выполняют управляющее действие по результатам трехмерного отслеживания изменения конфигурации управляющей кисти руки и взаиморасположения ее пальцев с использованием этой системы.
2. Способ бесконтактного управления компьютером, при котором в режиме работы устройства бесконтактного управления курсором осуществляют отслеживание изменения положения управляющей кисти руки, которая находится в рабочей зоне действия системы датчиков управления курсором, по результатам отслеживания изменения положения управляющей кисти руки осуществляют управление перемещением курсора, выполняют управляющее действие и при этом осуществляют выбор соответствующего инструмента для выполнения графического построения и выполняют непосредственно графическое построение, для чего нажимают клавиши устройства бесконтактного управления курсором, которые выполняют роль левой и правой кнопок «мыши», отличающийся тем, что при трехмерном отслеживании изменения положения управляющей кисти руки в рабочей зоне действия системы датчиков управления курсором одновременно дополнительно осуществляют трехмерное отслеживание изменения конфигурации управляющей кисти руки и взаиморасположения ее пальцев, по результатам этого трехмерного отслеживания при управлении перемещением курсора одновременно дополнительно осуществляют управляющее действие и при этом выбирают соответствующий инструмент для выполнения графического построения из меню графического редактора или офисных приложений, а при выполнении графического построения дополнительно осуществляют выбор режима работы этого инструмента, для чего или изменяют наклон управляющей кисти руки, или изменяют расстояние до нее относительно системы датчиков управления курсором устройства бесконтактного управления курсором.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
UAA200708235 | 2007-07-19 | ||
UAA200708235A UA92597C2 (ru) | 2007-07-19 | 2007-07-19 | Способ бесконтактного управления компьютером (варианты) |
Publications (2)
Publication Number | Publication Date |
---|---|
RU2008102945A RU2008102945A (ru) | 2009-07-27 |
RU2519286C2 true RU2519286C2 (ru) | 2014-06-10 |
Family
ID=50739194
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
RU2008102945/08A RU2519286C2 (ru) | 2007-07-19 | 2008-01-25 | Способ бесконтактного управления компьютером (варианты) |
Country Status (2)
Country | Link |
---|---|
RU (1) | RU2519286C2 (ru) |
UA (1) | UA92597C2 (ru) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
RU2618389C2 (ru) * | 2015-06-22 | 2017-05-03 | Федеральное государственное бюджетное учреждение науки Санкт-Петербургский институт информатики и автоматизации Российской академии наук | Способ бесконтактного управления курсором мыши |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
RU2132565C1 (ru) * | 1998-01-13 | 1999-06-27 | Раков Дмитрий Леонидович | Способ приема информации и устройство для его осуществления |
US6002808A (en) * | 1996-07-26 | 1999-12-14 | Mitsubishi Electric Information Technology Center America, Inc. | Hand gesture control system |
RU2175143C1 (ru) * | 2000-04-04 | 2001-10-20 | Свириденко Андрей Владимирович | Способ дистанционного управления |
EP1220143A2 (en) * | 2000-12-25 | 2002-07-03 | Hitachi, Ltd. | Electronics device applying an image sensor |
EP1457863A2 (en) * | 2003-03-11 | 2004-09-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Gesture-based input device for a user interface of a computer |
EP1615109A2 (en) * | 2004-06-28 | 2006-01-11 | Microsoft Corporation | Recognizing gestures and using gestures for interacting with software applications |
UA37742U (ru) * | 2008-06-04 | 2008-12-10 | Винницкий Национальный Технический Университет | Устройство для определения координат центра масс изображения |
-
2007
- 2007-07-19 UA UAA200708235A patent/UA92597C2/ru unknown
-
2008
- 2008-01-25 RU RU2008102945/08A patent/RU2519286C2/ru not_active IP Right Cessation
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6002808A (en) * | 1996-07-26 | 1999-12-14 | Mitsubishi Electric Information Technology Center America, Inc. | Hand gesture control system |
RU2132565C1 (ru) * | 1998-01-13 | 1999-06-27 | Раков Дмитрий Леонидович | Способ приема информации и устройство для его осуществления |
RU2175143C1 (ru) * | 2000-04-04 | 2001-10-20 | Свириденко Андрей Владимирович | Способ дистанционного управления |
EP1220143A2 (en) * | 2000-12-25 | 2002-07-03 | Hitachi, Ltd. | Electronics device applying an image sensor |
EP1457863A2 (en) * | 2003-03-11 | 2004-09-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Gesture-based input device for a user interface of a computer |
EP1615109A2 (en) * | 2004-06-28 | 2006-01-11 | Microsoft Corporation | Recognizing gestures and using gestures for interacting with software applications |
UA37742U (ru) * | 2008-06-04 | 2008-12-10 | Винницкий Национальный Технический Университет | Устройство для определения координат центра масс изображения |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
RU2618389C2 (ru) * | 2015-06-22 | 2017-05-03 | Федеральное государственное бюджетное учреждение науки Санкт-Петербургский институт информатики и автоматизации Российской академии наук | Способ бесконтактного управления курсором мыши |
Also Published As
Publication number | Publication date |
---|---|
UA92597C2 (ru) | 2010-11-25 |
RU2008102945A (ru) | 2009-07-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Song et al. | GaFinC: Gaze and Finger Control interface for 3D model manipulation in CAD application | |
Brandl et al. | Combining and measuring the benefits of bimanual pen and direct-touch interaction on horizontal interfaces | |
Ramos et al. | Pressure widgets | |
Tian et al. | Tilt menu: using the 3D orientation information of pen devices to extend the selection capability of pen-based user interfaces | |
Lepinski et al. | The design and evaluation of multitouch marking menus | |
CN103914260B (zh) | 基于触摸屏的操作对象的控制方法及装置 | |
Badam et al. | Supporting visual exploration for multiple users in large display environments | |
US20060288314A1 (en) | Facilitating cursor interaction with display objects | |
Au et al. | Multitouch gestures for constrained transformation of 3d objects | |
Xin et al. | Acquiring and pointing: an empirical study of pen-tilt-based interaction | |
Au et al. | Multitouch finger registration and its applications | |
EP2760363A1 (en) | Tactile glove for human-computer interaction | |
CN104246682A (zh) | 增强的虚拟触摸板和触摸屏 | |
US10180714B1 (en) | Two-handed multi-stroke marking menus for multi-touch devices | |
CN107126698A (zh) | 游戏虚拟对象的控制方法、装置、电子设备及可读介质 | |
Matulic et al. | Empirical evaluation of uni-and bimodal pen and touch interaction properties on digital tabletops | |
Radhakrishnan et al. | Finger-based multitouch interface for performing 3D CAD operations | |
Raees et al. | VEN-3DVE: vision based egocentric navigation for 3D virtual environments | |
KR20160097410A (ko) | 동작 인식을 통한 비접촉식 입력 인터페이스 제공 방법 및 그 장치 | |
Bai et al. | Asymmetric Bimanual Interaction for Mobile Virtual Reality. | |
RU2519286C2 (ru) | Способ бесконтактного управления компьютером (варианты) | |
Yao et al. | A multi-touch natural user interface framework | |
Tian et al. | An exploration of pen tail gestures for interactions | |
Uddin | Improving Multi-Touch Interactions Using Hands as Landmarks | |
CN105468273A (zh) | 一种用于在设备的触摸屏进行控制操作的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
FA92 | Acknowledgement of application withdrawn (lack of supplementary materials submitted) |
Effective date: 20130122 |
|
FZ9A | Application not withdrawn (correction of the notice of withdrawal) |
Effective date: 20130709 |
|
MM4A | The patent is invalid due to non-payment of fees |
Effective date: 20160126 |
|
TK4A | Correction to the publication in the bulletin (patent) |
Free format text: AMENDMENT TO IN JOURNAL: 25-2016 |
|
MM4A | The patent is invalid due to non-payment of fees |
Effective date: 20190126 |