RU2668388C2 - Промышленные транспортные средства, местоположение которых определяется по плафонам верхнего освещения - Google Patents

Промышленные транспортные средства, местоположение которых определяется по плафонам верхнего освещения Download PDF

Info

Publication number
RU2668388C2
RU2668388C2 RU2016114307A RU2016114307A RU2668388C2 RU 2668388 C2 RU2668388 C2 RU 2668388C2 RU 2016114307 A RU2016114307 A RU 2016114307A RU 2016114307 A RU2016114307 A RU 2016114307A RU 2668388 C2 RU2668388 C2 RU 2668388C2
Authority
RU
Russia
Prior art keywords
features
industrial vehicle
groups
processors
lines
Prior art date
Application number
RU2016114307A
Other languages
English (en)
Other versions
RU2016114307A3 (ru
RU2016114307A (ru
Inventor
Марк Белл
Кашьяп ЧАНДРАСЕКАР
Лукас Б. ВАЛЬТЦ
Джейкоб ТОМСОН
Original Assignee
Краун Эквипмент Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Краун Эквипмент Корпорейшн filed Critical Краун Эквипмент Корпорейшн
Publication of RU2016114307A publication Critical patent/RU2016114307A/ru
Publication of RU2016114307A3 publication Critical patent/RU2016114307A3/ru
Application granted granted Critical
Publication of RU2668388C2 publication Critical patent/RU2668388C2/ru

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/64Analysis of geometric attributes of convexity or concavity
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/42Global feature extraction by analysis of the whole pattern, e.g. using frequency domain transformations or autocorrelation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/48Extraction of image or video features by mapping characteristic values of the pattern into a parameter space, e.g. Hough transformation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/761Proximity, similarity or dissimilarity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20048Transform domain processing
    • G06T2207/20061Hough transform
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30172Centreline of tubular or elongated structure
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Automation & Control Theory (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Electromagnetism (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • General Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Computing Systems (AREA)
  • Medical Informatics (AREA)
  • Health & Medical Sciences (AREA)
  • Image Analysis (AREA)
  • Mechanical Engineering (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Forklifts And Lifting Vehicles (AREA)

Abstract

Изобретение относится к системам и способам определения характерных осевых линий потолочных плафонов, преимущественно для облегчения автоматического дистанционного управления перемещением. Технический результат – автоматическое определение ориентации транспортного средства. Способ определения местоположения транспортного средства по объектам окружающего пространства может предусматривать фиксацию входного изображения потолка, содержащего множество светопрозрачных фонарей. Признаки могут выделяться из входного изображения и могут быть сведены во множество групп признаков таким образом, чтобы каждая группа признаков была соотнесена с одним из светопрозрачных фонарей. Из признаков каждой группы могут быть выделены линейные сегменты, что осуществляется автоматически с помощью одного или нескольких процессоров, выполняющих алгоритм выделения признаков отдельно по каждой группе признаков. Из линейных сегментов каждой группы признаков может быть отобрано, по меньшей мере, две выделенные линии. Осевая линия для каждой группы признаков может определяться - по меньшей мере, частично - по двум отобранным линиям. Осевая линия каждой группы признаков может быть соотнесена с одним из светопрозрачных фонарей. 3 н. и 17 з.п. ф-лы, 9 ил.

Description

Ссылка на родственные заявки
Настоящая заявка испрашивает приоритет в соответствии с предварительной заявкой на выдачу патента США №61/884,388, поданной 30 сентября 2013 года; предварительной заявкой на выдачу патента США №61/897,287, поданной 30 октября 2013 года; и предварительной заявкой на выдачу патента США №14/499,721, поданной 29 сентября 2014 года.
Предшествующий уровень техники настоящего изобретения
Настоящее изобретение, в общем, относится к системам и способам выдачи признаков потолочных плафонов, в частности, к системам и способам выдачи характерных осевых линий потолочных плафонов.
Для перемещения грузов в промышленной среде рабочие часто используют промышленные транспортные средства, к которым относятся, например, вилочные автопогрузчики, ручные или электроприводные тележки для перевозки поддонов и/или иные подъемно-транспортные машины. Промышленные транспортные средства могут быть представлены автоматически управляемыми тележками или транспортными тележками с ручным управлением, перемещающимися в окружающем пространстве. С целью облегчения автоматического дистанционного управления, перемещения или и того и другого промышленное транспортное средство может быть снабжено системой определения его местоположения в окружающем пространстве. Иными словами, промышленное транспортное средство может быть оснащено датчиками и процессорами для определения его местоположения в окружающем пространстве, например, для определения ориентации и положения промышленного транспортного средства. Датчики могут быть выполнены с возможностью обнаружения объектов в окружающем пространстве, а определение местоположения транспортного средства может зависеть от признаков, выделенных из изображения такого обнаруженного объекта.
Краткое раскрытие настоящего изобретения
В одном из вариантов осуществления настоящего изобретения промышленное транспортное средство может содержать видеокамеру и один или несколько процессоров; при этом указанные компоненты коммуникативно связаны друг с другом. Видеокамера может быть установлена на промышленном транспортном средстве таким образом, чтобы она была направлена на потолок складского помещения. Видеокамера способна фиксировать входное изображение плафонов, расположенных на потолке складского помещения. Один или несколько процессоров выполняют машиночитаемые команды для увязки исходных признаков потолочных плафонов на входном изображении с одной или несколькими группами признаков. Для преобразования исходных признаков одной или нескольких групп признаков в линейные сегменты, соотнесенные с одной или несколькими группами признаков, может быть выполнено преобразование Хафа. Затем может быть найдена выпуклая оболочка исходных признаков одной или нескольких групп признаков. После чего линейные сегменты одной или нескольких групп признаков сравниваются с линейными сегментами выпуклой оболочки в пространстве Хафа. Линейные сегменты одной или нескольких групп признаков, которые выходят за пределы порогового значения степени сходства с выпуклой оболочкой исходных признаков одной или нескольких групп признаков, отбраковываются. Для одной или нескольких групп признаков может быть отобрано предпочтительное множество линий из линейных сегментов одной или нескольких групп признаков. Из предпочтительного множества линий может быть выделена осевая линия одной или нескольких групп признаков. Осевая линия одной или нескольких групп признаков может быть соотнесена с одним из потолочных плафонов на входном изображении. Промышленное транспортное средство может перемещаться внутри складского помещения, используя осевую линию одной или нескольких групп признаков.
В другом варианте осуществления настоящего изобретения промышленное транспортное средство может содержать видеокамеру и один или несколько процессоров, коммуникативно связанных с указанной видеокамерой. Эта видеокамера может быть установлена на промышленном транспортном средстве таким образом, чтобы она была направлена на потолок складского помещения. Эта видеокамера захватывает входное изображение светопрозрачного фонаря, расположенного на потолке складского помещения. Один или несколько процессоров выполняют машиночитаемые команды для выделения первичных характерных контуров светопрозрачного фонаря на входном изображении потолка. Первичные характерные контуры могут быть сведены в группу признаков. Для преобразования первичных характерных контуров группы признаков в линейные сегменты, соотнесенные с этой группой признаков, может быть выполнено преобразование Хафа. Затем может быть найдена выпуклая оболочка первичных характерных контуров группы признаков. После чего линейные сегменты группы признаков сравниваются с линейными сегментами выпуклой оболочки в пространстве Хафа. Линейные сегменты группы признаков, которые выходят за пределы порогового значения степени сходства с выпуклой оболочкой первичных характерных контуров группы признаков, отбраковываются. Для группы признаков может быть отобрано предпочтительное множество линий из линейных сегментов этой группы признаков. Из предпочтительного множества линий группы признаков может быть выделена осевая линия этой группы признаков. По осевой линии может определяться ориентация промышленного транспортного средства, его положение, или и то и другое. Используя данные об ориентации, местоположении или о том и другом, промышленное транспортное средство может перемещаться внутри складского помещения.
В еще одном из вариантов осуществления настоящего изобретения может быть реализован способ проводки промышленного транспортного средства. Он предусматривает захват входного изображения светопрозрачного фонаря и плафона практически круглой формы на потолке складского помещения. Сначала видеокамерой, соединенной с промышленным транспортным средством, захватывается входное изображение. Из входного изображения светопрозрачного фонаря могут быть выделены исходные признаки. Выпуклая оболочка исходных признаков может быть найдена автоматически с помощью одного или нескольких процессоров. Используя выпуклую оболочку, из исходных признаков можно отобрано предпочтительное множество линий. С помощью одного или нескольких процессоров практически круглый плафон на входном изображении может быть автоматически преобразован в точечный признак. Из предпочтительного множества линий может быть выделена осевая линия светопрозрачного фонаря. По осевой линии и точечному признаку может определяться ориентация промышленного транспортного средства, его положение, или и то и другое. Используя данные об ориентации, местоположении или о том и другом, промышленное транспортное средство может перемещаться внутри складского помещения.
А в еще одном из вариантов осуществления настоящего изобретения может быть реализована система проводки промышленного транспортного средства через здание. Эта система содержит видеокамеру, выполненную с возможностью установки на промышленном транспортном средстве и захвата изображения потолка здания, на котором установлены плафоны, а также один или несколько процессоров, которые коммуникативно связаны с указанной видеокамерой. Эта видеокамера способна захватывать входные изображения потолочных плафонов внутри здания. Один или несколько процессоров выполняют машиночитаемые команды для увязки исходных признаков потолочных плафонов на входном изображении с одной или несколькими группами признаков. Для преобразования исходных признаков одной или нескольких групп признаков в линейные сегменты, соотнесенные с одной или несколькими группами признаков, может быть выполнено преобразование Хафа. Затем может быть найдена выпуклая оболочка исходных признаков одной или нескольких групп признаков. После чего линейные сегменты одной или нескольких групп признаков сравниваются с линейными сегментами выпуклой оболочки в пространстве Хафа. Линейные сегменты одной или нескольких групп признаков, которые выходят за пределы порогового значения степени сходства с выпуклой оболочкой исходных признаков одной или нескольких групп признаков, отбраковываются. Для одной или нескольких групп признаков может быть отобрано предпочтительное множество линий из линейных сегментов одной или нескольких групп признаков. Из предпочтительного множества линий может быть выделена осевая линия одной или нескольких групп признаков. Осевая линия одной или нескольких групп признаков может быть соотнесена с одним из потолочных плафонов на входном изображении. Используя осевую линию одной или нескольких групп признаков, промышленное транспортное средство может перемещаться внутри складского помещения.
Применительно к любым промышленным транспортным средствам, способам и системам, описанным в настоящем документе, выпуклая оболочка может содержать линейные сегменты оболочки, с которыми сравниваются линейные сегменты одной или нескольких групп признаков.
Применительно к любым промышленным транспортным средствам, способам и системам, описанным в настоящем документе, один или несколько процессоров могут выполнять машиночитаемые команды для преобразования линейных сегментов оболочки в координаты пространства Хафа, где линейные сегменты оболочки представляют собой бесконечные линии, обозначаемые координатами ρ и θ.
Применительно к любым промышленным транспортным средствам, способам и системам, описанным в настоящем документе, один или несколько процессоров могут выполнять машиночитаемые команды для ранжирования линейных сегментов одной или нескольких групп признаков по степени интенсивности линий. Первая краевая линия может быть отобрана из линейных сегментов предпочтительного множества линий. Первая краевая линия может представлять собой линию высшего ранга из числа линейных сегментов предпочтительного множества линий. Дополнительно или в качестве альтернативного варианта первая краевая линия может быть представлена координатами ρ и θ. Дополнительно или в качестве альтернативного варианта один или несколько процессоров могут выполнять машиночитаемые команды для отбора второй краевой линии из линейных сегментов предпочтительного множества линий. Вторая краевая линия может быть отобрана, исходя из близости к координате θ первой краевой линии. Дополнительно или в качестве альтернативного варианта вторая краевая линия может быть отделена от первой краевой линии пороговым значением расстояния. Дополнительно или в качестве альтернативного варианта один или несколько процессоров могут выполнять машиночитаемые команды для перебора линейных сегментов из предпочтительного множества линий, переходя от линий высшего ранга к линиям низшего ранга, с целью отбора второй краевой линии. Дополнительно или в качестве альтернативного варианта один или несколько процессоров могут выполнять машиночитаемые команды для вычисления точки схождения, в которой сходятся вторая и первая краевые линии. Затем рассчитывается линия деления пополам второй краевой линии и первой краевой линии. По линии деления пополам может быть рассчитана осевая линия.
Применительно к любым промышленным транспортным средствам, способам и системам, описанным в настоящем документе, каждая группа из числа одной или нескольких групп исходных признаков может быть по отдельности преобразована в линейные сегменты.
Применительно к любым промышленным транспортным средствам, способам и системам, описанным в настоящем документе, входное изображение может быть недоэкспонировано для высвечивания плафонов верхнего освещения.
Применительно к любым промышленным транспортным средствам, способам и системам, описанным в настоящем документе, один или несколько процессоров могут выполнять машиночитаемые команды для выделения исходных признаков светопрозрачных фонарей. Исходными признаками могут служить первичные характерные контуры. Первичные характерные контуры могут быть отнесены к классу светопрозрачных фонарей. Первичные характерные контуры могут быть сведены в одну или несколько групп признаков. Одна или несколько групп признаков могут включать в себя по одной группе на каждый уникальный светопрозрачный фонарь из числа всех светопрозрачных фонарей. В каждой их этих групп могут содержаться первичные характерные контуры уникального светопрозрачного фонаря.
Применительно к любым промышленным транспортным средствам, способам и системам, описанным в настоящем документе, плафоны верхнего освещения могут быть представлены круглыми и совмещенными плафонами. Один или несколько процессоров могут выполнять машиночитаемые команды для выделения признаков из изображений круглых и совмещенных плафонов. Исходные признаки могут включать в себя признаки, выделенные из изображений круглых и совмещенных плафонов. Признаки, выделенные из изображений круглых и совмещенных плафонов, могут быть разбиты на два класса: стандартные плафоны и совмещенные плафоны. Дополнительно или в качестве альтернативного варианта исходные признаки могут включать в себя лишние признаки. Один или несколько процессоров могут выполнять машиночитаемые команды для классификации лишних признаков как искажений. Дополнительно или в качестве альтернативного варианта первичные характерные контуры могут быть сведены в одну или несколько групп признаков, исходя из их относительной близости друг к другу. Один или несколько процессоров могут выполнять машиночитаемые команды для расчета минимального рабочего прямоугольника для каждого из первичных характерных контуров. Относительная близость может быть рассчитана по расстоянию между признаками минимального рабочего прямоугольника для каждого из первичных характерных контуров.
Применительно к любым промышленным транспортным средствам, способам и системам, описанным в настоящем документе, запоминающее устройство может быть коммуникативно связано с одним или несколькими процессорами, видеокамерой или обоими указанными компонентами.
Применительно к любым промышленным транспортным средствам, способам и системам, описанным в настоящем документе, промышленное транспортное средство может быть приспособлено к перемещению в ручном и/или автоматическом режиме управления.
Более полное понимание указанных и дополнительных признаков, предложенных в вариантах осуществления заявленного изобретения, которые описаны в настоящем документе, может быть достигнуто путем ознакомления с нижеследующим подробным описанием в привязке к чертежам.
Краткое описание фигур
Варианты осуществления заявленного изобретения, представленные в настоящем документе, носят исключительно иллюстративный характер и не ограничивают объем заявленного изобретения, определенный формулой изобретения. Более полное понимание нижеследующего подробного описания иллюстративных вариантов осуществления настоящего изобретения может быть достигнуто в привязке к прилагаемым чертежам, на которых одни и те же позиции обозначаются одними и теми же номерами; в частности:
На фиг. 1 изображено транспортное средство, местоположение которого определяется по объектам окружающего пространства согласно одному или нескольким вариантам осуществления заявленного изобретения, проиллюстрированным и описанным в настоящем документе;
На фиг. 2 представлена блок-схема, иллюстрирующая пример алгоритма выделения признаков на изображении видеокамеры/выделения признаков верхнего освещения при определении местоположения транспортного средства по объектам окружающего пространства согласно одному или нескольким вариантам осуществления заявленного изобретения, проиллюстрированным и описанным в настоящем документе;
На фиг. 3 схематически показано входное изображение трех светопрозрачных фонарей согласно одному или нескольким вариантам осуществления заявленного изобретения, проиллюстрированным и описанным в настоящем документе;
На фиг. 4 представлена блок-схема, иллюстрирующая пример алгоритма выделения признаков светопрозрачных фонарей согласно одному или нескольким вариантам осуществления заявленного изобретения, проиллюстрированным и описанным в настоящем документе;
На фиг. 5 представлено схематическое изображение первичных характерных контуров трех светопрозрачных фонарей по фиг. 3 согласно одному или нескольким вариантам осуществления заявленного изобретения, проиллюстрированным и описанным в настоящем документе;
На фиг. 6 представлено схематическое изображение исходных признаков по фиг. 5, сведенных в отдельные группы, соответствующие каждому из светопрозрачных фонарей по фиг. 3, согласно одному или нескольким вариантам осуществления заявленного изобретения, проиллюстрированным и описанным в настоящем документе;
На фиг. 7 представлено схематическое изображение линейных сегментов, выделенных из групп исходных признаков по фиг. 5 с использованием метода выделения характерных признаков, согласно одному или нескольким вариантам осуществления заявленного изобретения, проиллюстрированным и описанным в настоящем документе;
На фиг. 8 представлено схематическое изображение отобранных линейных сегментов по фиг. 7, преобразованных в «бесконечные» линии, согласно одному или нескольким вариантам осуществления заявленного изобретения, проиллюстрированным и описанным в настоящем документе; и
На фиг. 9 представлено схематическое изображение признаков осевой линии, наложенных на входное изображение по фиг. 3, согласно одному или нескольким вариантам осуществления заявленного изобретения, проиллюстрированным и описанным в настоящем документе.
Подробное раскрытие настоящего изобретения
Варианты осуществления заявленного изобретения, описанные в настоящем документе, относятся, в общем, к способам определения местоположения по объектам окружающего пространства (метод EBL) для выделения признаков из элементов верхнего освещения, включающих в себя, помимо прочего, светопрозрачные фонари. Способ EBL может быть использован для определения местоположения и/или перемещения промышленного транспортного средства в пределах здания, такого как склад. Элементы верхнего освещения могут быть предусмотрены в потолке или установлены на потолке здания. Однако в некоторых вариантах реализации заявленного изобретения дополнительно или в качестве альтернативного варианта предусмотрено, что светильники могут свисать с потолка или соответствующих настенных конструкций. В некоторых вариантах осуществления настоящего изобретения на промышленном транспортном средстве (например, на автоматически управляемой тележке или транспортной тележке с ручным управлением), которое перемещается по складскому помещению, может быть установлена видеокамера. Входным изображением может быть любое изображение, захваченное видеокамерой до выделения из него признаков.
Как показано на фиг. 1, транспортное средство (100) может быть выполнено с возможностью перемещения в пределах складского помещения (110). Транспортное средство (100) может представлять собой промышленное транспортное средство для подъема и перемещения полезных грузов, такое как вилочный автопогрузчик, штабелер с выдвижным грузоподъемником, штабелер-комплектовщик, тележка-штабелер, буксировщик, паллетная тележка, самоходный прицеп с высоко/низко расположенной платформой, кран-штабелер, погрузчик с боковым выдвижным грузоподъемником, вилочный подъемник или иное транспортное средство подобного рода. Промышленное транспортное средство может быть выполнено с возможностью перемещения в ручном или автоматическом режиме по поверхности (122) складского помещения (110) по заданному маршруту. Соответственно, перемещение транспортного средства (100) вперед и назад осуществляется за счет вращения одного или нескольких колес (124). Дополнительно может быть предусмотрена возможность изменения направления движения транспортного средства (100) за счет управления одним или несколькими колесами (124) с помощью руля. Опционально транспортное средство может содержать органы (126) управления, обеспечивающие управление функциями транспортного средства, такими как, помимо прочего, частота вращения колес (124), ориентация колес (124) и т.п. Органы (126) управления могут представлять собой средства управления, соотнесенные с определенными функциями транспортного средства (100). К ним относятся, например, переключатели, кнопки, рычаги, ручки, педали, устройство ввода-вывода и т.п. Следует отметить, что термин «перемещать» в контексте настоящего документа означает управлять перемещением транспортного средства с одного места в другое.
Транспортное средство (100) дополнительно содержит видеокамеру (102) для захвата изображений потолка. Видеокамера (102) может представлять собой любое устройство подобного рода, способное фиксировать внешний вид объекта и преобразовывать его в изображение. Соответственно, видеокамера (102) может содержать датчик изображений, такой как, например, прибор с зарядовой связью, датчик изображений на КМОП-структуре или функциональные эквиваленты указанных устройств. В некоторых вариантах осуществления настоящего изобретения транспортное средство (100) может быть расположено внутри складского помещения (110) и выполнено с возможностью захвата изображений потолка (112) складского помещения (110). Для захвата потолочных изображений видеокамера (102) может быть установлена на транспортном средстве (100) таким образом, чтобы она была направлена на потолок (112). С целью описания и раскрытия заявленного изобретения термин «изображение» в контексте настоящего документа означает отображение внешнего вида обнаруженного объекта. Изображение может быть представлено в различных машиночитаемых форматах, таких как, например, JPEG, JPEG 2000, Exif, TIFF, RAW, GIF, BMP, PNG, Netpbm, WEBP, растровые форматы, векторные форматы или иные форматы подобного рода, пригодные для фиксации потолочных объектов.
На потолке (112) складского помещения (110) могут быть предусмотрены элементы верхнего освещения, такие как, помимо прочего, потолочные плафоны (114), освещающие транспортное средство, работающее внутри складского помещения, с потолка (112) или, в общем, сверху. Потолочные плафоны (114) могут представлять собой плафоны практически прямоугольной формы, такие как, например, светопрозрачные фонари (116), лампы дневного света или иные светильники подобного рода; при этом они могут быть предусмотрены на потолке или свисать с потолка или настенных конструкций, обеспечивая освещение сверху. В контексте настоящего документа термин «светопрозрачный фонарь» означает отверстие на потолке или крыше, закрытое практически прозрачной средой, пропускающей дневной свет, такой как, например, воздух, стекло, пластик и т.п. Хотя светопрозрачные фонари могут характеризоваться самой разной формой и размерами, светопрозрачные фонари, описанные в настоящем документе, могут представлять собой «стандартные» вытянутые фонари практически прямоугольной формы, разделенные или не разделенные поперечинами или перекладинами на ряд панелей. В альтернативном варианте светопрозрачные фонари могут представлять собой не связанные друг с другом фонари меньшего размера прямоугольной или круглой формы, схожие по размерам с окнами спальни, т.е. примерно 30×60 дюймов (примерно 73×146 см). Дополнительно или в качестве альтернативного варианта потолочные плафоны (114) могут включать в себя плафоны практически круглой формы, такие как, например, круглые плафоны (118); совмещенные плафоны (120), состоящие из множества примыкающих друг к другу круглых плафонов, образующих единый объект; или иные плафоны подобного рода. Таким образом, элементы верхнего освещения или «потолочные плафоны» представляют собой источники естественного (например, дневного) или искусственного (например, электрического) освещения.
Варианты осуществления заявленного изобретения, описанные в настоящем документе, могут содержать один или несколько процессоров (104), коммуникативно связанных с видеокамерой (102). Один или несколько процессоров (104) могут выполнять машиночитаемые команды для автоматической реализации любого способа или функции, описанной в настоящем документе. Запоминающее устройство (106), содержащее машиночитаемые команды, может быть коммуникативно связано с одним или несколькими процессорами (104), видеокамерой (102) или указанными компонентами в любом сочетании. Каждый процессор из числа одного или нескольких процессоров (104) может представлять собой процессор, интегральную схему, микрочип, компьютер или любое иное вычислительное устройство, способное выполнять машиночитаемые команды или выполненное с возможностью выполнения функций аналогично машиночитаемым командам. Запоминающее устройство (106) может представлять собой ОЗУ, ПЗУ, флэш-память, жесткий диск или любой энергонезависимый носитель, на котором могут храниться машиночитаемые команды.
Один или несколько процессоров (104) и запоминающее устройство (106) могут быть интегрированы в видеокамеру (102). Дополнительно или в качестве альтернативного варианта один или несколько процессоров (104) и запоминающее устройство (106) могут быть интегрированы в транспортное средство (100). Кроме того, один или несколько процессоров (104) и запоминающее устройство (106) могут быть отделены от транспортного средства (100) и видеокамеры (102). Например, один или несколько процессоров (104), запоминающее устройство (106) или оба этих компонента могут быть предусмотрены на сервере или мобильном вычислительном устройстве. Следует отметить, что один или несколько процессоров (104), запоминающее устройство (106) и видеокамера (102) могут представлять собой дискретные компоненты, коммуникативно связанные друг с другом в пределах объема заявленного изобретения. Соответственно в некоторых вариантах осуществления настоящего изобретения компоненты одного или нескольких процессоров (104), компоненты запоминающего устройства (106) и компоненты видеокамеры (102) могут быть физически отделены друг от друга. Фраза «коммуникативно связаны» в контексте настоящего документа означает, что компоненты способны обмениваться друг с другом сигналами данных, например, электрическими сигналами через проводящую среду, электромагнитными сигналами по воздуху, оптическими сигналами по оптическим волноводам и т.п.
Таким образом, в вариантах осуществления настоящего изобретения может быть предусмотрена логическая схема или алгоритм, написанный любым языком программирования любого поколения (например, 1GL, 2GL, 3GL, 4GL или 5GL). Логическая схема или алгоритм может быть написан как машинный код, исполняемый непосредственно процессором; или же как язык ассемблера, объектно-ориентированный язык программирования, скриптовый язык, микрокод и т.д., который может быть скомпилирован или сведен в машиночитаемые команды, хранящиеся на машиночитаемом носителе информации. Дополнительно или в качестве альтернативного варианта логическая схема или алгоритм может быть написан на языке описания технических средств (HDL). Кроме того, логическая схема или алгоритм может быть реализован через программируемую логическую интегральную схему типа FPGA, специализированную заказную интегральную схему (ASIC) или их эквиваленты.
Как было отмечено выше, транспортное средство (100) может быть коммуникативно связано с одним или несколькими процессорами (104); или же в него могут быть интегрированы такие процессоры. Соответственно, один или несколько процессоров (104) могут выполнять машиночитаемые команды по управлению функциями органов (126) управления или по их замене. Машиночитаемые команды могут храниться в запоминающем устройстве (106). Соответственно, в некоторых вариантах осуществления настоящего изобретения транспортное средство (100) может перемещаться в автоматическом режиме под управлением одного или нескольких процессоров (104), выполняющих машиночитаемые команды. В некоторых вариантах реализации заявленного изобретения местоположение транспортного средства (100) во время перемещения может контролироваться системой EBL.
Например, транспортное средство (100) может автоматически перемещаться по поверхности (122) в пределах складского помещения (110) по заданному маршруту в заданное место, исходя из своего локализованного положения. В некоторых вариантах осуществления настоящего изобретения транспортное средство (100) может определить свое локализованное положение относительно складского помещения (110). Локализованное положение транспортного средства (100) может быть определено путем сравнения входных данных с картографическими данными. Картографические данные могут храниться в запоминающем устройстве (106) и периодически обновляться; или же картографические данные могут поступать с сервера или иного источника данных подобного рода. С учетом локализованного положения можно проложить маршрут движения транспортного средства (100) до требуемой точки. После прокладки маршрута транспортное средство (100) может начать движение по заданному маршруту, перемещаясь по поверхности (122) складского помещения (110). В частности, один или несколько процессоров (106) могут выполнять машиночитаемые команды для реализации функций EBL и управления транспортным средством (100). В одном из вариантов осуществления настоящего изобретения один или несколько процессоров (106) могут регулировать рулевое управление колесами (124) и контролировать подачу горючей смеси в двигатель для перемещения транспортного средства (100) по поверхности (122).
На фиг. 2 представлена блок-схема, иллюстрирующая последовательность выполнения операций по полному алгоритму (10) выделения признаков на изображении видеокамеры (CFE-алгоритму). Следует отметить, что хотя в проиллюстрированном варианте осуществления настоящего изобретения все операции пронумерованы и выстроены в определенной последовательности, эти операции могут выполняться и в альтернативной последовательности в пределах объема настоящего изобретения. Следует также отметить, что одна или несколько операций могут быть пропущены в пределах объема вариантов осуществления заявленного изобретения, раскрытых в настоящем документе.
Как показано на фиг. 1-3, CFE-алгоритм (10) может предусматривать операцию (20) предварительной обработки входного изображения (200) потолка (204) до выполнения последующих операций над входным изображением (200). Как видно, входное изображение (200) фиксирует кадр со светопрозрачными фонарями (202), соответствующими светопрозрачным фонарям (116) складского помещения (110). В некоторых вариантах осуществления настоящего изобретения операция (20) предварительной обработки может предусматривать устранение эффекта дисторсии объектива на входном изображении (200). Дополнительно или в качестве альтернативного варианта входное изображение (200) может фиксироваться с намеренным недоэкспонированием для высвечивания потолочных плафонов (114), в том числе светопрозрачных фонарей (116). Было установлено, что недоэкспонирование способствует уменьшению отражений и других побочных артефактов, наличие которых усложняет процесс выделения признаков и делает его менее надежным.
CFE-алгоритм (10) может предусматривать дополнительную операцию (22) по выделению признаков из входного изображения (200) потолка (204). В операции (22) по выделению признаков может использоваться один или несколько алгоритмов обнаружения признаков, таких как, например, алгоритм максимально стабильных экстремальных регионов (MSER), стадия определения порогового значения в сочетании с методом Опу для выделения исходных признаков (например, плафонов) из изображения или эквивалентные алгоритмы. В частности, выделенные из входного изображения (200) признаки могут быть использованы в процессе определения местоположения для вычисления положения потолочных плафонов (114), изображение которых зафиксировано видеокамерой (102). Например, из признаков круглых элементов освещения, таких как плафоны практически круглой формы, могут быть выделены центроиды. Кроме того, светопрозрачный фонарь небольшого размера может быть полностью захвачен одним кадром изображения. Соответственно, функция выделения центроидов может быть применена в отношении плафонов практически круглой формы.
CFE-алгоритм (10) может дополнительно предусматривать операцию (24) классификации исходных признаков (206), выделенных из входного изображения (200) потолка (204) в ходе выполнения операции (22) по выделению признаков. Операция (24) классификации предусматривает разделение исходных признаков (206) на разные классы с целью их подготовки к последующему, более точному, процессу обработки. Например, по отношению более длинной главной оси к малой оси может быть проведено различие между совмещенными и круглыми плафонами. Светопрозрачные панели могут быть отделены от круглых плафонов, исходя из размеров и круглости. В частности, круглые плафоны обычно образуют на изображении пятна меньшего размера и более круглой формы в сравнении со светопрозрачными панелями. Иногда более мелкие сегменты светопрозрачных панелей могут быть представлены на изображении во фрагментированном виде, что может привести к ошибке при классификации.
В проиллюстрированном варианте осуществления настоящего изобретения исходные признаки (206) могут быть разделены на следующие четыре класса: стандартные плафоны (круглой формы), совмещенные плафоны, светопрозрачные фонари и искажения. Метка искажений может быть использована для обозначения лишних «ложных» признаков, таких как отражения. Исходные признаки (206), классифицированные как искажения, могут быть отбракованы на стадии выполнения операции (24) классификации признаков; т.е. они не будут использоваться в ходе выполнения последующих операций. Каждый из признаков остальных трех классов может быть подвергнут отдельной обработке для выделения требуемой информации. Как будет подробнее описано ниже, из исходных признаков (206) класса стандартных плафонов и класса совмещенных плафонов может быть выделен точечный признак, а из класса стандартных светопрозрачных фонарей может быть выделен линейный признак, после чего каждый из выделенных признаков может быть передан в систему EBL.
В частности, на стадии (26) обработки данных по круглым плафонам выявляются центроиды исходных признаков (206) класса стандартных плафонов. Дополнительно или в качестве альтернативного варианта на стадии (28) обработки данных по совмещенным плафонам осуществляется разделение пары плафонов, которые проявляются слитно на входном изображении (200), и выполняется поиск двух центроидов. На стадии (30) обработки данных по светопрозрачным фонарям все выделенные компоненты, относящиеся к классу светопрозрачных фонарей, сводятся в соответствующую группу, после чего вычисляются их осевые линии, что будет подробнее описано ниже. На стадии (50) фильтрации признаков по целевой области удаляются признаки, выходящие за пределы данной области. Соответственно, могут быть удалены любые остаточные признаки, такие как отражения от стойки тележки. На стадии (52) преобразования системы координат осуществляется перевод координат признаков из системы обработки изображений (например, начало отсчета - в верхнем левом углу) в систему EBL (например, начало отсчета - по центру изображения) до того, как подтвержденные признаки будут переданы в EBL на стадии (54).
Обратимся теперь к фиг. 3-5, где на фиг.4 представлена блок-схема последовательности (30) операций по обработке признаков класса светопрозрачных фонарей. Следует отметить, что хотя в проиллюстрированном варранте реализации заявленного изобретения все эти операции пронумерованы и выстроены в определенной последовательности, они могут выполняться и в альтернативной последовательности в пределах объема настоящего изобретения. Следует также отметить, что одна или несколько операций могут быть пропущены в пределах объема вариантов осуществления заявленного изобретения, раскрытых в настоящем документе. Входными данными для последовательности (30) операций по обработке признаков класса светопрозрачных фонарей служат первичные характерные контуры (208), которые могут представлять собой исходные признаки (206) входного изображения (200), отнесенные к классу светопрозрачных фонарей. Выходными данными последовательности (30) операций по обработке признаков класса светопрозрачных фонарей может служить множество характерных осевых линий (226). В некоторых вариантах осуществления настоящего изобретения осевые линии (226) могут быть определены как координаты в пространстве Хафа (т.е. как полярные координаты). Предпочтительно, чтобы для каждого уникального светопрозрачного фонаря (202), зафиксированного на входном изображении (200), была подтверждена одна осевая линия (226).
Как показано на фиг. 4 и 6, последовательность (30) операций по обработке признаков класса светопрозрачных фонарей может предусматривать стадию (32) группирования, на которой первичные характерные контуры (208) соотносятся со светопрозрачными фонарями. В ходе операции по группированию может быть использован любой алгоритм, способный обеспечить повторяющееся соотнесение первичных характерных контуров (208) со светопрозрачными фонарями (202). В одном из вариантов осуществления настоящего изобретения для группирования первичных характерных контуров (208), исходя из их относительной близости друг к другу, может быть использовано пороговое значение расстояния. Поскольку первичные характерные контуры (208) могут иметь сложную форму, сначала для каждого из них могут быть рассчитаны ориентированные рабочие прямоугольники минимального размера, после чего по указанным прямоугольникам может быть рассчитано расстояние между признаками для группирования.
Соответственно, первичные характерные контуры (208) могут быть сгруппированы с целью их разделения по светопрозрачным фонарям, соотнесенным с первичными характерными контурами (208). Заявителями было установлено, что колебания естественного освещения могут вызывать несоответствие изображений, т.е. панели могут разбиваться непоследовательно. Соответственно, осевые линии (226) могут определяться по всем светопрозрачным фонарям, которые представлены сгруппированными первичными характерными контурами (208), а не по признакам каждой отдельной панели. В некоторых вариантах осуществления настоящего изобретения первичные характерные контуры (208) могут быть сведены в группы (210) признаков, по одной группе на каждый светопрозрачный фонарь (202). В частности, поскольку входное изображение (200) (фиг. 3) содержит три светопрозрачных фонаря (202), первичные характерные контуры могут быть сведены в три группы (210) признаков, которые локализуются на стадии (32) группирования.
Как показано на фиг. 4 и 7, последовательность (30) операций по обработке признаков класса светопрозрачных фонарей может предусматривать стадию (34) выделения признаков, на которой из первичных характерных контуров (208) выделяются линейные сегменты (212). Линейные сегменты (212) могут быть соотнесены с каждой из групп (210) признаков в виде первичных характерных контуров (208). В некоторых вариантах осуществления настоящего изобретения стадия (34) выделения признаков может предусматривать использование алгоритма выделения признаков, который может обеспечить преобразование каждой группы (210) признаков в виде первичных характерных контуров (208) по отдельности, т.е. единовременно по одной труппе, в линейные сегменты (212), соотнесенные с группой (210) признаков, из который были выделены эти линейный сегменты (212). В некоторых вариантах реализации заявленного изобретения по каждой отдельной группе (210) признаков в виде первичных характерных контуров (208) может быть выполнено преобразование Хафа с целью выявления линейных сегментов (212), соотнесенных с каждым светопрозрачным фонарем (202). Каждый из линейных сегментов (212) может быть представлен двумя концевыми точками. Возвращаемые после преобразования Хафа линейные сегменты (212) могут быть ранжированы по степени интенсивности, т.е. чем больше пикселей в линии или чем длиннее линия, тем более высокий ранг эта линия имеет в преобразовании Хафа. Было установлено, что из-за эффекта искажения перспективы и затемнения линейные сегменты (212) более высокого ранга могут не соответствовать «правильным» краевым линиям. Например, линейными сегментами (212) более высокого ранга могут быть перпендикулярные пересекающие линии (218), отходящие от поперечин, разделяющих панели. Для повышения вероятности выделения корректных осевых линий может быть предусмотрена стадия (36) фильтрации, на которой отфильтровываются нежелательные линии, возвращаемые после преобразования.
Как показано на фиг. 4, 6 и 8, последовательность (30) операций по обработке признаков класса светопрозрачных фонарей может предусматривать стадию (36) фильтрации для отбора предпочтительного множества линий (214) из линейных сегментов (212) в группах (210) признаков. Например, после выделения групп (210) признаков в виде линейных сегментов (212) предпочтительное множество линий (214) может быть отобрано с помощью алгоритма вычислительной геометрии, например, алгоритма для решения статических задач или иного алгоритма подобного рода. В одном из вариантов осуществления настоящего изобретения для отбора предпочтительного множества линий (214) может быть использован алгоритм выпуклой оболочки. Было установлено, что использование алгоритмов выпуклой оболочки в сочетании с преобразованиями Хафа может существенно улучшить возможности CFE-алгоритма (10) (фиг. 2) по выделению «правильных» краевых линий, используемых для нахождения характерных осевых линий. Соответственно, может быть повышена точность определения осевых линий и улучшена локализация с использованием характерных осевых линий.
В некоторых вариантах осуществления настоящего изобретения может быть найдена выпуклая оболочка (220) групп (210) признаков в виде первичных характерных контуров (208) (например, группы концевых точек светопрозрачных фонарей и т.п.). Выпуклая оболочка (220) может представлять собой выпуклое множество, содержащее первичные характерные контуры (208), такое как, например, глобальное минимальное выпуклое множество или локальное минимальное выпуклое множество, определенное алгоритмом выпуклой оболочки. Выпуклая оболочка (220) групп (210) признаков в виде первичных характерных контуров (208) может содержать упорядоченный перечень точек, именуемых точками выпуклой оболочки (А, В, С и D). В некоторых вариантах осуществления настоящего изобретения точки выпуклой оболочки могут циклически повторяться для нахождения линейных сегментов (228) оболочки, составляющих выпуклую оболочку (220); т.е. линейный сегмент (228) может быть образован точкой А оболочки и точкой В оболочки, точкой В оболочки и точкой С оболочки, точкой С оболочки и точкой D оболочки, точкой D оболочки и точкой А оболочки, и т.д. Линейные сегменты (228) оболочки могут быть преобразованы в координаты пространства Хафа (т.е. в полярные координаты).
Обратимся теперь к фиг. 6-8. Линейные сегменты (228) выпуклой оболочки (220) могут сравниваться (предпочтительно в пространстве Хафа) с линейными сегментами (212), соотнесенными с группой (210) признаков в виде первичных характерных контуров (208). Любые линейные сегменты (212) из группы (210) признаков, которые выходят за пределы определенного порогового значения степени сходства с линейными сегментами (228) выпуклой оболочки (220) в координатах пространства Хафа, могут быть отбракованы и исключены из предпочтительного множества линий. Следует отметить, что отбраковывается большинство диагональных линий (230) и перпендикулярных пересекающих линий (218) в группах (210) признаков. Дополнительно или в качестве альтернативного варианта линейные сегменты (212), представленные двумя концевыми точками, могут быть преобразованы в «бесконечные» линии, т.е. линии, представленные в пространства Хафа координатами ρ и θ.
Если обратиться к фиг. 2, 4 и 7, то следует отметить, что в некоторых вариантах осуществления настоящего изобретения стадия (36) фильтрации не является обязательной. Например, заявителями было установлено, что если расстояние от видеокамеры (102) до потолка (112) достаточно велико, то входное изображение (200) может характеризоваться уменьшенным искажением перспективы. Следовательно, перпендикулярные пересекающие линии (218), отходящие от поперечин, которые разделяют панели, могут быть не обнаружены в ходе выполнения операции (34) по выделению признаков, так как перпендикулярные пересекающие линии (218) могут оказаться намного короче длинных «правильных» краевых линий на входном изображении (200).
Как показано на фиг. 2, 4 и 7-9, последовательность (30) операций по обработке признаков класса светопрозрачных фонарей может предусматривать стадию (38) вычисления осевой линии, на которой осуществляется отбор двух краевых линий из группы (210) признаков, соответствующих светопрозрачному фонарю (202), и вычисление осевой линии (226) по отобранным краевым линиям. В частности, для выведения осевой линии (226) для каждого светопрозрачного фонаря (202) могут быть отобраны и использованы первая краевая линия (222) и вторая краевая линия (224). По завершении отбора предпочтительного множества линий (214) в качестве первой краевой линии (222) могут быть отобраны линейные сегменты (212) наивысшего ранга, оставшиеся в предпочтительном множестве линий (214). Поскольку координаты первой краевой линии в пространстве Хафа могут быть известны, то может быть инициирован перебор линий (214) из предпочтительного множества (от линий высшего ранга к линиям низшего ранга) с целью отбора второй краевой линии (224) из числа линейных сегментов (212), которая характеризовалась бы углом 0, приближенным к углу первой краевой линии (222). Поскольку в некоторых вариантах осуществления настоящего изобретения операция (36) фильтрации является необязательной, первая краевая линия (222) и вторая краевая линия (224) могут быть отобраны, как это описано выше, непосредственно из группы (210) признаков в виде линейных сегментов (212).
В некоторых вариантах осуществления настоящего изобретения для того, чтобы гарантировать отбор второй краевой линии (224) таким образом, чтобы она отстояла от первой краевой линии (222) в пространстве Хафа, т.е. во избежание отбора аналогичной линии, выведенной по повторяющемуся признаку, может быть использовано пороговое значение расстояния. В частности, заявителями было установлено, что множественные схожие линии могут быть сведены после преобразования Хафа в единую краевую линию. Соответственно, в качестве второй краевой линии (224) могут быть отобраны линейные сегменты (212) высшего ранга, удовлетворяющие критериям подобия.
Осевая линия (226) может быть рассчитана по первой краевой линии (222) и второй краевой линии (224). Например, в одном из вариантов осуществления настоящего изобретения осевая линия (226) может быть локализована путем вычисления точки схождения, в которой первая краевая линия (222) сходится со второй краевой линией (224). Линия деления пополам может быть найдена с использованием координат точки (216) схождения, первой краевой линии (222) и второй краевой линии (224) в пространстве Хафа. Линия деления может быть использована в качестве осевой линии (226). Осевые линии (226), которые наложены поверх входного изображения (200), как это показано на фиг. 9, могут быть переданы в систему EBL. Таким образом, осевая линия каждой группы признаков может быть соотнесена с одним из светопрозрачных фонарей, а система EBL может быть использована для выдачи признаков, обеспечивающих перемещение транспортного средства, или же она может отображаться на дисплее, коммуникативно связанным с системой EBL. Следует отметить, что существует ряд параметров (например, пороговые значения), которые могут быть сконфигурированы под каждую функцию CFE-алгоритма в зависимости от конкретного производственного объекта, в пределах которой перемещается транспортное средство. Соответственно, варианты осуществления заявленного изобретения, описанные в настоящем документе, могут дополнительно предусматривать стадию калибровки для определения точных значений параметров.
Следует понимать, что варианты реализации CFE-алгоритма, описанные в настоящем документе, могут быть использованы для выделения признаков из объектов, зафиксированных на входных изображениях потолка. Таким образом, объекты, которые могут быть обнаружены на потолке, такие как, например, потолочные плафоны, могут быть использованы для генерирования признаков, которые могут быть переданы в систему EBL. Система EBL может использовать признаки, полученные с входного изображения, для определения ориентации транспортного средства, его положения или и того и другого. Например, переданные признаки могут включать в себя осевые линии и точечные признаки, которые могут быть использованы в совокупности. Соответственно, ориентация и положение транспортного средства могут быть использованы в качестве параметров навигации, одновременной локализации и картирования (SLAM) или и того и другого.
Следует отметить, что термины «практически» и «около» в контексте настоящего документа означают естественную степень неопределенности, которая может быть отнесена к любому количественному сравнению, значению, измерению или иному показателю. В контексте настоящего документа эти термины также используются для отражения степени возможного отклонения количественного показателя от заявленного контрольного значения, которое не приводит к изменению базовых функций рассматриваемого объекта изобретения.
Хотя в настоящем документе проиллюстрированы и описаны конкретные примеры осуществления изобретения, следует понимать, что возможны различные изменения и дополнения, не выходящие за пределы существа и объема настоящего изобретения, определенные формулой изобретения. Более того, хотя в настоящем описании представлены различные аспекты заявленного предмета изобретения, эти аспекты не обязательно должны использоваться в сочетании. Поэтому предполагается, что прилагаемая формула изобретения охватывает все такие изменения и дополнения в пределах объема заявленного предмета изобретения.

Claims (72)

1. Промышленное транспортное средство, содержащее видеокамеру и один или несколько процессоров, в котором:
видеокамера коммуникативно связана с одним или несколькими процессорами;
видеокамера фиксирует входное изображение плафонов освещения на потолке складского помещения; а
один или несколько процессоров, предназначенных для осуществления машиночитаемых команд для:
увязки исходных признаков потолочных плафонов на входном изображении с одной или несколькими группами признаков;
выполнения преобразования Хафа с целью преобразования исходных признаков одной или нескольких групп признаков в линейные сегменты, соотнесенные с одной или несколькими группами признаков;
нахождения выпуклой оболочки исходных признаков одной или нескольких групп признаков;
сравнения линейных сегментов одной или нескольких групп признаков и выпуклой оболочки в пространстве Хафа;
отбраковки линейных сегментов одной или нескольких групп признаков, выходящих за пределы порогового значения степени сходства с выпуклой оболочкой исходных признаков одной или нескольких групп признаков, в результате чего для одной или нескольких групп признаков отбирается предпочтительное множество линий из линейных сегментов одной или нескольких групп признаков;
нахождения осевой линии одной или нескольких групп признаков среди предпочтительного множества линий;
соотнесения осевой линии одной или нескольких групп признаков с одним из потолочных плафонов на входном изображении; и
перемещение промышленного транспортного средства по складскому помещению по осевой линии одной или нескольких групп признаков.
2. Промышленное транспортное средство по п. 1, в котором выпуклая оболочка содержит линейные сегменты оболочки, с которыми сравниваются линейные сегменты одной или нескольких групп признаков.
3. Промышленное транспортное средство по п. 2, в котором один или несколько процессоров предназначены для выполнения машиночитаемых команд для:
преобразования линейных сегментов оболочки в координаты пространства Хафа, где линейные сегменты оболочки представлены бесконечными линиями с координатами ρ и θ.
4. Промышленное транспортное средство по п. 1, в котором один или несколько процессоров предназначены для выполнения машиночитаемых команд для:
ранжирования линейных сегментов из одной или нескольких групп признаков по степени интенсивности линий; и
отбора первой краевой линии из линейных сегментов предпочтительного множества линий; при этом первая краевая линия представляет собой линию высшего ранга из числа линейных сегментов предпочтительного множества линий.
5. Промышленное транспортное средство по п. 4, в котором первая краевая линия представлена координатами ρ и θ.
6. Промышленное транспортное средство по п. 5, в котором один или несколько процессоров предназначены для выполнения машиночитаемых команд для:
отбора второй краевой линии из линейных сегментов предпочтительного множества линий; при этом вторая краевая линия отбирается исходя из степени сходства со значением θ первой краевой линии.
7. Промышленное транспортное средство по п. 6, в котором вторая краевая линия и первая краевая линия разделены заданным пороговым расстоянием.
8. Промышленное транспортное средство по п. 6, в котором один или несколько процессоров предназначены для выполнения машиночитаемых команд для:
перебора линейных сегментов из предпочтительного множества линий от линий более высокого ранга к линиям более низкого ранга с целью отбора второй краевой линии.
9. Промышленное транспортное средство по п. 6, в котором один или несколько процессоров выполняют машиночитаемые команды для:
нахождения точки схождения, в которой первая краевая линия сходится со второй краевой линией; и
вычисления линии деления пополам второй краевой линии и первой краевой линии; при этом по этой линии деления пополам вычисляется осевая линия.
10. Промышленное транспортное средство по п. 1, в котором каждая из групп из числа одной или нескольких групп исходных признаков по отдельности преобразуется в линейные сегменты.
11. Промышленное транспортное средство по п. 1, в котором входное изображение недоэкспонируется для высвечивания потолочных плафонов.
12. Промышленное транспортное средство по п. 1, в котором к элементам верхнего освещения относятся светопрозрачные фонари, а один или несколько процессоров предназначены для выполнения машиночитаемых команд для:
выделения первичных характерных контуров из светопрозрачных фонарей; при этом первичные характерные контуры содержатся в исходных признаках;
классификации первичных характерных контуров как признаков, относящихся к классу светопрозрачных фонарей; и
сведения первичных характерных контуров в одну или несколько групп признаков; при этом одна или несколько групп признаков включает в себя по одной группе на каждый уникальный светопрозрачный фонарь из числа всех светопрозрачных фонарей, а в каждой из этих групп содержатся первичные характерные контуры уникального светопрозрачного фонаря.
13. Промышленное транспортное средство по п. 12, в котором к элементам верхнего освещения относятся круглые и совмещенные плафоны, а один или несколько процессоров предназначены для выполнения машиночитаемых команд для:
выделения признаков из круглых и совмещенных плафонов; при этом признаки, выделяемые из круглых и совмещенных плафонов, содержатся в исходных признаках; и
классификации признаков, выделенных из круглых и совмещенных плафонов, как признаков, относящихся к классу стандартных плафонов и классу совмещенных плафонов.
14. Промышленное транспортное средство по п. 12, в котором исходные признаки содержат лишние признаки, а один или несколько процессоров предназначены для выполнения машиночитаемых команд для определения лишних признаков как искажений.
15. Промышленное транспортное средство по п. 12, в котором первичные характерные контуры сводятся в одну или несколько групп признаков исходя из их относительной близости друг к другу, а один или несколько процессоров предназначены для выполнения машиночитаемых команд для:
нахождения минимального рабочего прямоугольника для каждого первичного характерного контура; и
расчета относительной близости исходя из расстояния между признаками минимального рабочего прямоугольника для каждого из первичных характерных контуров.
16. Промышленное транспортное средство, содержащее видеокамеру и один или несколько процессоров, в котором:
видеокамера коммуникативно связана с одним или несколькими процессорами;
видеокамера смонтирована на промышленном транспортном средстве и направлена на потолок складского помещения;
видеокамера фиксирует входное изображение светопрозрачного фонаря на потолке складского помещения; а
один или несколько процессоров предназначены для выполнения машиночитаемых команд для:
выделения первичных характерных контуров из светопрозрачного фонаря на входном изображении потолка;
сведения первичных характерных контуров в группу признаков;
выполнения преобразования Хафа для преобразования первичных характерных контуров из группы признаков в линейные сегменты, соотнесенные с этой группой признаков;
нахождения выпуклой оболочки первичных характерных контуров группы признаков;
сравнения линейных сегментов группы признаков и выпуклой оболочки в пространстве Хафа;
отбраковки линейных сегментов группы признаков, выходящих за пределы порогового значения степени сходства с выпуклой оболочкой первичных характерных контуров группы признаков, в результате чего для группы признаков отбирается предпочтительное множество линий из линейных сегментов этой группы признаков;
нахождения осевой линии группы признаков из предпочтительного множества линий этой группы признаков;
определения ориентации промышленного транспортного средства, его положения или и того и другого по осевой линии; и
перемещения промышленного транспортного средства по складскому помещению с использованием данных об ориентации, положении или о том и другом.
17. Промышленное транспортное средство по п. 16, в котором входное изображение содержит круглые и совмещенные плафоны, а один или несколько процессоров предназначены для выполнения машиночитаемых команд для:
выделения признаков из круглых и совмещенных плафонов на входном изображении;
выделения из входного изображения лишних признаков;
классификации признаков, выделенных из круглых и совмещенных плафонов как класса стандартных плафонов и класса совмещенных плафонов; и
отнесения лишних признаков к классу искажений.
18. Промышленное транспортное средство по п. 16, в котором пороговое значение расстояния используется для сведения первичных характерных контуров в группу признаков исходя из их относительной близости друг к другу.
19. Промышленное транспортное средство по п. 18, в котором один или несколько процессоров предназначены для выполнения машиночитаемых команд для:
нахождения минимального рабочего прямоугольника для каждого первичного характерного контура; и
расчета относительной близости исходя из расстояния между признаками минимального рабочего прямоугольника для каждого из первичных характерных контуров.
20. Способ перемещения промышленного транспортного средства, содержащий следующие стадии:
фиксацию входного изображения светопрозрачного фонаря и плафона практически круглой формы на потолке складского помещения; при этом фиксация входного изображения осуществляется видеокамерой, связанной с промышленным транспортным средством;
выделение признаков из светопрозрачного фонаря на входном изображении;
автоматическое нахождение выпуклой оболочки исходных признаков с помощью одного или нескольких процессоров;
отбор предпочтительного множества линий из исходных признаков с использованием выпуклой оболочки исходных признаков;
автоматическое преобразование плафона практически круглой формы на входном изображении в точечный признак с помощью одного или нескольких процессоров;
выделение осевой линии светопрозрачного фонаря из предпочтительного множества линий;
определение ориентации промышленного транспортного средства, его положения или и того и другого по осевой линии и точечного признака; и
перемещение промышленного транспортного средства по складскому помещению с использованием данных об ориентации, положении или о том и другом.
RU2016114307A 2013-09-30 2014-09-30 Промышленные транспортные средства, местоположение которых определяется по плафонам верхнего освещения RU2668388C2 (ru)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201361884388P 2013-09-30 2013-09-30
US61/884,388 2013-09-30
US201361897287P 2013-10-30 2013-10-30
US61/897,287 2013-10-30
US14/499,721 2014-09-29
US14/499,721 US9170581B2 (en) 2013-09-30 2014-09-29 Industrial vehicles with overhead light based localization
PCT/US2014/058239 WO2015048717A1 (en) 2013-09-30 2014-09-30 Industrial vehicles with overhead light based localization

Related Child Applications (1)

Application Number Title Priority Date Filing Date
RU2018130871A Division RU2018130871A (ru) 2013-09-30 2014-09-30 Промышленные транспортные средства, местоположение которых определяется по плафонам верхнего освещения

Publications (3)

Publication Number Publication Date
RU2016114307A RU2016114307A (ru) 2017-10-16
RU2016114307A3 RU2016114307A3 (ru) 2018-06-28
RU2668388C2 true RU2668388C2 (ru) 2018-09-28

Family

ID=52740928

Family Applications (2)

Application Number Title Priority Date Filing Date
RU2018130871A RU2018130871A (ru) 2013-09-30 2014-09-30 Промышленные транспортные средства, местоположение которых определяется по плафонам верхнего освещения
RU2016114307A RU2668388C2 (ru) 2013-09-30 2014-09-30 Промышленные транспортные средства, местоположение которых определяется по плафонам верхнего освещения

Family Applications Before (1)

Application Number Title Priority Date Filing Date
RU2018130871A RU2018130871A (ru) 2013-09-30 2014-09-30 Промышленные транспортные средства, местоположение которых определяется по плафонам верхнего освещения

Country Status (8)

Country Link
US (2) US9170581B2 (ru)
EP (2) EP3053141B1 (ru)
KR (2) KR102397508B1 (ru)
CN (2) CN110222702B (ru)
AU (2) AU2014324480B2 (ru)
BR (1) BR112016006854A2 (ru)
RU (2) RU2018130871A (ru)
WO (1) WO2015048717A1 (ru)

Families Citing this family (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2309261A1 (en) 1997-05-30 2011-04-13 Stryker Corporation Methods for evaluating tissue morphogenesis and morphogenic activity
ATE515268T1 (de) 2004-05-25 2011-07-15 Stryker Corp Verwendung von op-1 zur behandlung von knorpeldefekten
US20100204123A1 (en) 2009-02-12 2010-08-12 Mary Elizabeth Pecquet Goad Peripheral Administration of Proteins Including TGF-beta Superfamily Members for Treatment of Systemic Disorders and Disease
AU2010341565A1 (en) 2009-12-22 2012-07-12 Stryker Corporation BMP-7 variants with reduced immunogenicity
US9174830B1 (en) * 2014-09-29 2015-11-03 Crown Equipment Limited Industrial vehicles with point fix based localization
US10455226B2 (en) 2015-05-26 2019-10-22 Crown Equipment Corporation Systems and methods for image capture device calibration for a materials handling vehicle
EP3511678B1 (en) 2015-05-26 2023-02-22 Crown Equipment Corporation Systems and methods for materials handling vehicle odometry calibration
KR20180049024A (ko) 2015-09-04 2018-05-10 크라운 이큅먼트 코포레이션 특징부-기반 위치파악 및 네비게이션을 이용하는 산업용 차량
KR102136016B1 (ko) * 2016-01-04 2020-07-21 저장 리뱌오 로보츠 컴퍼니 리미티드 로봇 휠 직경 보완 방법 및 장치
EP3439522B1 (en) 2016-04-08 2023-06-07 A&K Robotics Inc. Autoscrubber convertible between manual and autonomous operation
JP2018036937A (ja) * 2016-09-01 2018-03-08 住友電気工業株式会社 画像処理装置、画像処理システム、画像処理プログラムおよびラベル
US10108194B1 (en) 2016-09-02 2018-10-23 X Development Llc Object placement verification
KR102000067B1 (ko) * 2017-01-16 2019-09-17 엘지전자 주식회사 이동 로봇
US11181925B2 (en) * 2018-02-23 2021-11-23 Crown Equipment Corporation Systems and methods for optical target based indoor vehicle navigation
CN108415413B (zh) * 2018-03-28 2021-03-30 华南农业大学 一种基于圆形有用域的智能叉车局部避障路径规划方法
EP4235341A3 (en) 2018-07-17 2023-11-15 Crown Equipment Corporation Systems and methods for vehicle position calibration using rack leg identification
CN109606384B (zh) * 2018-12-29 2021-04-20 百度在线网络技术(北京)有限公司 车辆控制方法、装置、设备和存储介质
US11640175B2 (en) 2019-02-06 2023-05-02 Crown Equipment Corporation Systems and methods for end of aisle protection and vehicle position calibration using rack leg identification
AU2020225213B2 (en) 2019-02-19 2023-11-16 Crown Equipment Corporation Systems and methods for calibration of a pose of a sensor relative to a materials handling vehicle
CA3138906A1 (en) 2019-05-02 2020-11-05 Crown Equipment Corporation Industrial vehicle with feature-based localization and navigation
CN110414384B (zh) * 2019-07-11 2021-07-27 东南大学 智能稻麦收获机导航线跟踪方法
CN111179290B (zh) * 2019-12-26 2023-04-28 东软睿驰汽车技术(沈阳)有限公司 一种确定凸包的方法和相关装置
CN111191645A (zh) * 2020-01-07 2020-05-22 东南大学 基于行车记录仪图像的车辆隧道定位方法
US11897350B2 (en) 2020-07-02 2024-02-13 Crown Equipment Corporation Materials handling vehicle charging system comprising a floor-mounted charging plate

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4773018A (en) * 1985-08-22 1988-09-20 Bt Carrago Aktiebolag Light tracking automatic navigation system
US4790402A (en) * 1987-09-28 1988-12-13 Tennant Company Automated guided vehicle
EP0363339A2 (en) * 1988-10-04 1990-04-11 Transitions Research Corporation Mobile robot navigation employing ceiling light fixtures
RU2262880C2 (ru) * 2003-02-06 2005-10-27 Самсунг Гвангджу Электроникс Ко., Лтд Система робота -пылесоса с внешним зарядным устройством (варианты) и способ стыковки робота -пылесоса с внешним зарядным устройством
RU2010147394A (ru) * 2010-11-19 2012-05-27 ООО "Битроника" (RU) Робот мобильный и мобильный робототехнический комплекс на его основе (варианты)
WO2012164169A1 (en) * 2011-06-03 2012-12-06 Marimils Oy Method and system for observation

Family Cites Families (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4947094A (en) 1987-07-23 1990-08-07 Battelle Memorial Institute Optical guidance system for industrial vehicles
US5359666A (en) 1988-09-28 1994-10-25 Honda Giken Kogyo Kabushiki Kaisha Driving way judging device and method
FR2637681B1 (fr) 1988-10-12 1990-11-16 Commissariat Energie Atomique Procede de mesure de l'evolution de la position d'un vehicule par rapport a une surface
EP0366350A3 (en) 1988-10-25 1991-05-22 Tennant Company Guiding an unmanned vehicle by reference to overhead features
US5155684A (en) 1988-10-25 1992-10-13 Tennant Company Guiding an unmanned vehicle by reference to overhead features
JP3397336B2 (ja) 1992-03-13 2003-04-14 神鋼電機株式会社 無人車の位置・方向検出方法
JP3300092B2 (ja) 1993-02-19 2002-07-08 オリンパス光学工業株式会社 画像特徴抽出装置
JPH07248822A (ja) 1994-03-10 1995-09-26 Fujitsu Ltd 無人搬送車の走行制御方法及び無人搬送車
DE4429016A1 (de) 1994-08-16 1996-02-22 Linde Ag Navigation für fahrerlose Fahrzeuge
EP0740163B1 (en) 1995-04-25 2005-12-14 Matsushita Electric Industrial Co., Ltd. Local positioning apparatus for detecting a local position of an automobile on a road
JP3556766B2 (ja) 1996-05-28 2004-08-25 松下電器産業株式会社 道路白線検出装置
EP1232424A1 (en) 1999-11-18 2002-08-21 The Procter & Gamble Company Home cleaning robot
DE10008289A1 (de) 2000-02-23 2001-09-06 Siemens Ag Verfahren und Vorrichtung zur Bestimmung der Ausrichtung und/oder der Bewegungsrichtung eines bewegbaren Objekts, insbesondere eines Roboters, in einem Bewegungsraum
RU2220643C2 (ru) 2001-04-18 2004-01-10 Самсунг Гванджу Электроникс Ко., Лтд. Автоматическое чистящее устройство, автоматическая чистящая система и способ управления этой системой (варианты)
EP1378861A1 (en) 2002-07-01 2004-01-07 Mitsubishi Electric Information Technology Centre Europe B.V. Method and apparatus for image processing
JP4042517B2 (ja) 2002-10-09 2008-02-06 株式会社日立製作所 移動体およびその位置検出装置
US7444002B2 (en) * 2004-06-02 2008-10-28 Raytheon Company Vehicular target acquisition and tracking using a generalized hough transform for missile guidance
JP4311391B2 (ja) 2005-10-03 2009-08-12 ソニー株式会社 接触形状算出装置及び接触形状算出方法、並びにコンピュータ・プログラム
DE102006062061B4 (de) 2006-12-29 2010-06-10 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung, Verfahren und Computerprogramm zum Bestimmen einer Position basierend auf einem Kamerabild von einer Kamera
KR100871115B1 (ko) 2007-05-16 2008-11-28 엘지전자 주식회사 이동로봇 및 그 동작방법
KR100877071B1 (ko) 2007-07-18 2009-01-07 삼성전자주식회사 파티클 필터 기반의 이동 로봇의 자세 추정 방법 및 장치
US8040351B1 (en) * 2007-07-31 2011-10-18 Nvidia Corporation Using a geometry shader to perform a hough transform
AT509118B1 (de) 2008-07-16 2011-12-15 Zeno Track Gmbh Verfahren und vorrichtung zum erfassen der position eines fahrzeuges in einem definierten bereich
DE102008036412A1 (de) 2008-08-05 2010-02-11 Still Gmbh Verfahren zur Fahrerunterstützung bei einem Flurförderzeug
JP5275752B2 (ja) 2008-10-30 2013-08-28 秀機 拜郷 排気装置及び塗装作業用装置
DE102009004854B4 (de) 2009-01-16 2015-08-06 Jungheinrich Aktiengesellschaft Verfahren und System zur Positionsbestimmung eines Flurförderzeugs
KR101036028B1 (ko) 2009-07-08 2011-05-19 고려대학교 산학협력단 고속 회전 불변 특징 정합 방법, 이를 구비하는 천장 영상 기반 이동 로봇 장치 및 이의 위치 인식 방법
KR101540666B1 (ko) 2009-07-22 2015-07-31 엘지전자 주식회사 이동 로봇의 위치추정을 위한 회전변화에 불변하는 특징점 검출 장치 및 방법
KR101035058B1 (ko) 2009-09-25 2011-05-19 전자부품연구원 이동 로봇 및 그의 자기위치 인식을 위한 천장영역 인식방법
KR101092002B1 (ko) 2009-11-05 2011-12-08 재단법인 포항지능로봇연구소 인공표식, 인공표식과 자연표식을 혼용한 네비게이션 장치 및 방법
KR101065960B1 (ko) 2009-11-18 2011-09-19 인하대학교 산학협력단 이동체의 위치를 인식하는 이동 시스템 및 위치 추정 방법
DE102010008957A1 (de) 2010-02-19 2011-08-25 FusionSystems GmbH, 09125 Positionsbestimmung mittels optischer Kode-Schiene (Astropos)
EP2385435A1 (en) 2010-04-22 2011-11-09 Danaher Motion Särö AB A method and a system for gathering data
DE102010017689A1 (de) * 2010-07-01 2012-01-05 Vorwerk & Co. Interholding Gmbh Selbsttätig verfahrbares Gerät sowie Verfahren zur Orientierung eines solchen Gerätes
KR20120021064A (ko) 2010-08-31 2012-03-08 엘지전자 주식회사 이동 로봇 및 이의 제어 방법
US8576056B2 (en) * 2010-11-10 2013-11-05 Deere & Company Vehicle guidance system
CN102135429B (zh) 2010-12-29 2012-06-13 东南大学 一种基于视觉的机器人室内定位导航方法
KR101248308B1 (ko) 2011-01-31 2013-03-27 고려대학교 산학협력단 천장 조명 방향 특성 활용 이동 로봇 위치 인식 방법 및 이를 활용한 천장 조명 방향 특성 활용 위치 인식 이동 로봇 장치
JP2012164229A (ja) 2011-02-08 2012-08-30 Ihi Corp 屋内用自律走行移動体の自己位置測定方法及び装置
EP2549408A1 (de) 2011-07-20 2013-01-23 Delphi Technologies, Inc. Verfahren zur Detektion und Klassifikation von Objekten
KR101311100B1 (ko) 2011-08-27 2013-09-25 고려대학교 산학협력단 천장 임의 형상 특성 활용 이동 로봇 위치 인식 방법
DE102011115354B4 (de) 2011-10-07 2017-01-05 Telejet Kommunikations Gmbh Navigation anhand von zufälligen Mustern
KR101295959B1 (ko) 2011-10-20 2013-08-13 충북대학교 산학협력단 실내 천장 영상을 이용한 이동 로봇 위치 측정 장치 및 방법
CN103020632B (zh) 2012-11-20 2016-03-30 北京航空航天大学 一种室内环境中移动机器人定位标志点的快速识别方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4773018A (en) * 1985-08-22 1988-09-20 Bt Carrago Aktiebolag Light tracking automatic navigation system
US4790402A (en) * 1987-09-28 1988-12-13 Tennant Company Automated guided vehicle
EP0363339A2 (en) * 1988-10-04 1990-04-11 Transitions Research Corporation Mobile robot navigation employing ceiling light fixtures
US4933864A (en) * 1988-10-04 1990-06-12 Transitions Research Corporation Mobile robot navigation employing ceiling light fixtures
RU2262880C2 (ru) * 2003-02-06 2005-10-27 Самсунг Гвангджу Электроникс Ко., Лтд Система робота -пылесоса с внешним зарядным устройством (варианты) и способ стыковки робота -пылесоса с внешним зарядным устройством
RU2010147394A (ru) * 2010-11-19 2012-05-27 ООО "Битроника" (RU) Робот мобильный и мобильный робототехнический комплекс на его основе (варианты)
WO2012164169A1 (en) * 2011-06-03 2012-12-06 Marimils Oy Method and system for observation

Also Published As

Publication number Publication date
AU2014324480A1 (en) 2016-04-07
KR102397508B1 (ko) 2022-05-13
KR20220062696A (ko) 2022-05-17
KR102523226B1 (ko) 2023-04-20
RU2016114307A3 (ru) 2018-06-28
CN110222702B (zh) 2023-10-31
CN110222702A (zh) 2019-09-10
US9606540B2 (en) 2017-03-28
RU2018130871A (ru) 2019-03-19
EP3489894B1 (en) 2020-07-01
RU2016114307A (ru) 2017-10-16
US20150094900A1 (en) 2015-04-02
AU2020201664B2 (en) 2021-08-12
US20160011595A1 (en) 2016-01-14
CN105765627A (zh) 2016-07-13
WO2015048717A1 (en) 2015-04-02
AU2014324480B2 (en) 2019-12-05
CN105765627B (zh) 2019-07-05
EP3053141A1 (en) 2016-08-10
AU2020201664A1 (en) 2020-03-26
KR20160065922A (ko) 2016-06-09
EP3053141B1 (en) 2019-07-03
EP3489894A1 (en) 2019-05-29
US9170581B2 (en) 2015-10-27
BR112016006854A2 (pt) 2017-08-01

Similar Documents

Publication Publication Date Title
RU2668388C2 (ru) Промышленные транспортные средства, местоположение которых определяется по плафонам верхнего освещения
US9340399B2 (en) Industrial vehicles with point fix based localization
US10928204B2 (en) Industrial vehicle with feature-based localization and navigation
CN111989544A (zh) 基于光学目标的室内车辆导航的系统和方法
US20200348673A1 (en) Industrial vehicle with feature-based localization and navigation
CN117115240A (zh) 一种通用栈板3d位姿定位方法及系统、存储介质

Legal Events

Date Code Title Description
MM4A The patent is invalid due to non-payment of fees

Effective date: 20191001