RU2583708C2 - Стереоскопическое устройство выделения динамических объектов - Google Patents

Стереоскопическое устройство выделения динамических объектов Download PDF

Info

Publication number
RU2583708C2
RU2583708C2 RU2014137873/08A RU2014137873A RU2583708C2 RU 2583708 C2 RU2583708 C2 RU 2583708C2 RU 2014137873/08 A RU2014137873/08 A RU 2014137873/08A RU 2014137873 A RU2014137873 A RU 2014137873A RU 2583708 C2 RU2583708 C2 RU 2583708C2
Authority
RU
Russia
Prior art keywords
adc
arm
omk
input
outputs
Prior art date
Application number
RU2014137873/08A
Other languages
English (en)
Other versions
RU2014137873A (ru
Inventor
Александр Геннадьевич Спеваков
Кирилл Николаевич Воробьев
Ирина Сергеевна Надеина
Original Assignee
Федеральное государственное бюджетное образовательное учреждение высшего образования "Юго-Западный государственный университет" (ЮЗГУ)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Федеральное государственное бюджетное образовательное учреждение высшего образования "Юго-Западный государственный университет" (ЮЗГУ) filed Critical Федеральное государственное бюджетное образовательное учреждение высшего образования "Юго-Западный государственный университет" (ЮЗГУ)
Priority to RU2014137873/08A priority Critical patent/RU2583708C2/ru
Publication of RU2014137873A publication Critical patent/RU2014137873A/ru
Application granted granted Critical
Publication of RU2583708C2 publication Critical patent/RU2583708C2/ru

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Image Input (AREA)
  • Image Analysis (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

Изобретение относится к области автоматизированных систем видеонаблюдения. Техническим результатом является повышение точности и скорости выделения динамических объектов. Стереоскопическое устройство выделения движущихся объектов содержит: идентичные датчики изображения, аналого-цифровые преобразователи, блок выделения кадрового и строчных импульсов (БВКСИ) 5, элемент И 6, генератор тактовых импульсов 7, однокристальный микроконтроллер на архитектуре ARM (ОМК-ARM) с USB - контроллером 8 с буферной памятью (БП) и видеоинтерфейсом (ВИ), мультиплексор 9. Выделение движущихся объектов сводится к получению пространственных параметров движущегося объекта, размеры и конфигурация которого изменяются в процессе измерения, расположенного на сложном пространственном фоне, для чего необходима последовательная обработка, требующая оценки сигнала на каждом такте с учетом информации, поступающей в процессе наблюдения. После корректировки осуществляется передача данных в ЭВМ через USB - контроллер. 1 ил.

Description

Изобретение относится к вычислительной технике и может быть использовано в составе специализированных и робототизированных системах с техническим зрением для выделения объектов наблюдения, позволяющее повысить точность и быстродействие определения параметров движения.
Известна полезная модель, относящаяся к области измерений трехмерных координат различных перемещающихся объектов, не являющихся статическими (изменяющих свое положение и пространственную конфигурацию во времени), состоящая из двух цифровых видеокамер, электронных вычислительных средств, включающих подсистему построения трехмерных моделей, система содержит не менее чем одно управляемое по цифровому интерфейсу устройство синхронизации кадров от видеокамер на основе их содержания, расположенное в зоне обзора видеокамер, электронные вычислительные средства содержат синхронизирующее вычислительное устройство, содержит систему управления устройством синхронизации кадров и автоматическую систему технического зрения для распознавания состояния устройства синхронизации кадров на основе их содержания [Патент на полезную модель РФ №119095, кл. G01B11/00. 2012].
Недостатком указанной модели является то, что для выделения перемещающегося в пространстве объекта изображения, поступающие с камер, при обработке на ЭВМ должны быть строго синхронизированы по времени, что накладывает серьезные ограничения на быстрое действие системы.
Наиболее близким к предлагаемому является система выделения контуров изображений объектов, содержащее датчик изображения и буферную память, введены элемент И, генератор, нейроматричный процессор (МК), АЦП, блок выделения кадрового и строчного импульсов (БВКСИ) и контроллер PCI шины, где точность обработки изображения достигается за счет введения в устройство высокопроизводительного микроконтроллера и использования алгоритма выделения контуров объекта изображения на основе нечеткой логики [Патент на изобретение РФ №2185659, кл. G06K 9/46, 2000].
Данное устройство не определяет пространственные параметры движущихся объектов.
Технической задачей устройства является создание стереоскопической системы определения параметров движения динамических объектов.
Поставленная задача решается посредством того, что в устройстве выделения подвижных объектов, содержащее 2 датчика изображения (ДИ1, ДИ2), введены элемент И, генератор, однокристальный микроконтроллер на архитектуре ARM (ОМК-ARM), АЦП, блок выделения кадрового и строчного импульсов (БВКСИ) и USB - контроллер, причем выходы датчиков изображения подключены к информационным входам АЦП и ко входам БВКСИ, первый выход которого соединен с первым входом элемента И и входом VP_VSYNC ОМК-ARM, а второй выход - со вторым входом элемента И и входом VP_HSYNC ОМК-ARM, выход которого соединен со входом синхронизации АЦП, выход генератора подключен к четвертому входу элемента И, чей третий вход соединен с выходом инициализации INIT ОМК-ARM, информационные выходы АЦП соединены через мультиплексор с информационными входами ОМК-ARM, а выходы готовности данных RDY АЦП - с управляющими входами VP_CLKIN1 и VP_CLKIN1 видеоинтерфейса ОМК-ARM.
Сущность изобретения поясняется чертежами, где на фиг. 1 представлена структурная схема устройства для выделения динамических объектов.
Устройство выделения динамических объектов содержит два датчика изображения ДИ 1 и ДИ 2, АЦП 3 и АЦП 4, блок выделения кадрового и строчного импульсов (БВКСИ) 5, элемент И 6, генератор 7, однокристальный микроконтроллер на архитектуре ARM (ОМК-ARM) с USB - контроллером 8, мультиплексор 9, причем выходы датчиков изображения 1 и 2 подключены к информационным входам АЦП 3 и АЦП 4 соответственно и ко входу БВКСИ 5, первые выходы которых соединены с первым элемента И 6 и входом VP_VSYNC ОМК-ARM, а второй выход - со вторым входом элемента И и входом VP_HSYNC ОМК-ARM 8, выход которого соединен со входами синхронизации АЦП 3 и 4, выход генератора 7 подключен к четвертому входу элемента И 6, чей третий вход соединен с выходом инициализации INIT ОМК-ARM 8, информационные выходы АЦП 3 и 4 соединены через мультиплексор с видеоинтерфейсом (ВИ) ОМК-ARM 8, а выход готовности данных RDY АЦП 3 и 4 - с управляющими входами VP_CLKIN1 и VP_CLKIN1 видеоинтерфейса ОМК-ARM 8 соответственно, а USB - контроллер подключается к соответствующим входам-выходам для связи с ПК.
Устройство работает следующим образом.
Видеосигнал от датчиков изображения ДИ 1 и ДИ 2 поступает на блок выделения кадрового и строчного импульсов 5 и аналого-цифровые преобразователи АЦП 3 и АЦП 4 соответственно. Как только блок выделения кадрового и строчного импульсов 5 выдает импульс начала кадра и импульс начала строки, на выходе элемента И 6 появятся синхронизирующие импульсы, формируемые генератором и поступающие на входы синхронизации аналого-цифровых преобразователей АЦП 3 и АЦП 4. АЦП преобразуют аналоговый видеосигнал в цифровой вид. Критерием оцифровки является получение 640 элементов изображения на каждую видеостроку. Так как длительность активной части видеостроки составляет 53 мкс, то на каждый образец отводится 80 нс (фиг.2).
По каждому импульсу аналого-цифровые преобразователи 3,4 осуществляют преобразование входного аналогового сигнала, получаемого от датчиков изображения ДИ 1 и ДИ 2, в параллельный цифровой код который передается с информационных выходов аналого-цифровых преобразователей АЦП 3 и АЦП 4 через мультиплексор на входы видеоинтерфейса ОМК-ARM 8. Далее через глобальную шину нейроматричного процессора информационный код передается в буферную память. Как только в БП запишутся первые 80 восьмибитных элемента изображений, параллельно с записью оставшейся части кадров в буферную память, ОМК-ARM 8 начнет выполнять алгоритм локализации динамических объектов, как только локализована первая область, ОМК-ARM осуществляет выделение внешнего контура объекта, после выделения контура запускает алгоритм идентификации и сопоставления. Как только идентичные точки, для которых находится параллакс, будут найдены, начнет работу алгоритм определения пространственных координат объекта изображения. После завершения работы алгоритма результат передается в БП, далее из буферной памяти через глобальную шину ОМК-ARM и USB-контроллер передаются в ПК.
Этапы обработки НМП включают:
- Локализация областей изображения.
- Идентификация динамического объекта.
- Определение пространственных координат динамических объектов.
Таким образом, разработанная стереоскопическая оптико-электронная система слежения осуществляет ввод полутонового изображения по двум каналам с разрешением 640х480, выделяет движущиеся объекты, определяет их пространственные координаты и позволяет вести наблюдение за несколькими динамическими объектами одновременно в реальном масштабе времени.

Claims (1)

  1. Устройство выделения контуров объекта изображения, содержащее два датчика изображения ДИ1 и ДИ2, два аналогово-цифровых преобразователя АЦП и АЦП, блок выделения кадрового и строчного импульсов БВКСИ, элемент И, генератор, блок управления, буферную память, однокристальный микроконтроллер на архитектуре ARM ОМК-ARM с USB - контроллером, мультиплексор, причем выходы датчиков изображения ДИ 1 и ДИ 2 подключены к информационным входам АЦП 1 и АЦП 2 соответственно и ко входу БВКСИ, первые выходы которых соединены с первым элемента И и входом VP_VSYNC ОМК-ARM, а второй выход - со вторым входом элемента И и входом VP_HSYNC ОМК-ARM, выход которого соединен со входами синхронизации АЦП 1 и АЦП 2, выход генератора подключен к четвертому входу элемента И, чей третий вход соединен с выходом инициализации INIT ОМК-ARM, информационные выходы АЦП 1 и 2 соединены через мультиплексор с видеоинтерфейсом ВИ ОМК-ARM, а выход готовности данных RDY АЦП 1 и АЦП 2- с управляющими входами VP_CLKIN1 и VP_CLKIN1 видеоинтерфейса ВИ ОМК-ARM соответственно, а USB - контроллер подключается к соответствующим входам-выходам для связи с ПК, отличающееся тем, что с целью выделения динамических объектов и определения координат их местоположения оно содержит два датчика изображения ДИ 1 и ДИ 2, способствующих получению пространственных параметров движущегося объекта, размеры и конфигурация которого изменяются в процессе измерения, расположенного на сложном пространственном фоне, однокристальный микроконтроллер на архитектуре ARM ОМК-ARM с USB - контроллером, осуществляющий вертикальную и горизонтальную обработку изображения, два аналогово-цифровых преобразователя АЦП 1 и АЦП 2, причем выходы датчиков изображения ДИ 1 и ДИ 2 и подключены к информационным входам АЦП 1 и АЦП 2 соответственно и ко входу БВКСИ, выход которого соединен со входами синхронизации АЦП 1 и АЦП 2, информационные выходы АЦП 1 и АЦП 2 соединены через мультиплексор с видеоинтерфейсом ВИ ОМК-ARM.
RU2014137873/08A 2014-09-19 2014-09-19 Стереоскопическое устройство выделения динамических объектов RU2583708C2 (ru)

Priority Applications (1)

Application Number Priority Date Filing Date Title
RU2014137873/08A RU2583708C2 (ru) 2014-09-19 2014-09-19 Стереоскопическое устройство выделения динамических объектов

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2014137873/08A RU2583708C2 (ru) 2014-09-19 2014-09-19 Стереоскопическое устройство выделения динамических объектов

Publications (2)

Publication Number Publication Date
RU2014137873A RU2014137873A (ru) 2016-04-10
RU2583708C2 true RU2583708C2 (ru) 2016-05-10

Family

ID=55647553

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2014137873/08A RU2583708C2 (ru) 2014-09-19 2014-09-19 Стереоскопическое устройство выделения динамических объектов

Country Status (1)

Country Link
RU (1) RU2583708C2 (ru)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2714603C1 (ru) * 2018-12-28 2020-02-18 Федеральное государственное бюджетное образовательное учрежедение высшего образования "Юго-Западный государственный университет" (ЮЗГУ) Подвижное стереоскопическое устройство выделения динамических объектов
RU203219U1 (ru) * 2020-10-19 2021-03-26 Федеральное государственное бюджетное образовательное учреждение высшего образования "Юго-Западный государственный университет" (ЮЗГУ) Устройство для интерполяции изображений

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0405400A2 (en) * 1989-06-30 1991-01-02 Mita Industrial Co., Ltd. Image distinguishing device
RU2050594C1 (ru) * 1991-07-15 1995-12-20 Серпуховское высшее военное командно-инженерное училище ракетных войск им.Ленинского комсомола Устройство для отслеживания контуров двумерных объектов
RU2185659C1 (ru) * 2000-12-28 2002-07-20 Курский государственный технический университет Устройство выделения контуров изображений объектов
RU119095U1 (ru) * 2012-03-28 2012-08-10 Закрытое акционерное общество "МНИТИ" (ЗАО "МНИТИ") Система построения трехмерных пространственных моделей подвижных объектов

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0405400A2 (en) * 1989-06-30 1991-01-02 Mita Industrial Co., Ltd. Image distinguishing device
RU2050594C1 (ru) * 1991-07-15 1995-12-20 Серпуховское высшее военное командно-инженерное училище ракетных войск им.Ленинского комсомола Устройство для отслеживания контуров двумерных объектов
RU2185659C1 (ru) * 2000-12-28 2002-07-20 Курский государственный технический университет Устройство выделения контуров изображений объектов
RU119095U1 (ru) * 2012-03-28 2012-08-10 Закрытое акционерное общество "МНИТИ" (ЗАО "МНИТИ") Система построения трехмерных пространственных моделей подвижных объектов

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2714603C1 (ru) * 2018-12-28 2020-02-18 Федеральное государственное бюджетное образовательное учрежедение высшего образования "Юго-Западный государственный университет" (ЮЗГУ) Подвижное стереоскопическое устройство выделения динамических объектов
RU203219U1 (ru) * 2020-10-19 2021-03-26 Федеральное государственное бюджетное образовательное учреждение высшего образования "Юго-Западный государственный университет" (ЮЗГУ) Устройство для интерполяции изображений

Also Published As

Publication number Publication date
RU2014137873A (ru) 2016-04-10

Similar Documents

Publication Publication Date Title
KR101808840B1 (ko) 학습 기반 깊이 정보 추출 방법 및 장치
EP3258441B1 (en) Template creation device and template creation method
EP3287873A3 (en) System and method for distant gesture-based control using a network of sensors across the building
CN106687063A (zh) 跟踪系统及利用其的跟踪方法
CN110216674B (zh) 一种冗余自由度机械臂视觉伺服避障系统
KR102357680B1 (ko) 이벤트에 기반하여 객체의 이동을 감지하는 장치 및 방법
KR20130066438A (ko) 영상 처리 장치 및 영상 처리 방법
US11209790B2 (en) Actuator control system, actuator control method, information processing program, and storage medium
US20200327693A1 (en) Information processing apparatus, information processing system, information processing method, and program
CN103942843A (zh) 一种基于视频的航道船舶三维模型动态呈现方法
WO2015161376A1 (en) System and method for stereophotogrammetry
RU2583708C2 (ru) Стереоскопическое устройство выделения динамических объектов
JP2018156408A (ja) 画像認識撮像装置
CN103258188A (zh) 基于跨平台计算机视觉库的移动目标物体检测跟踪方法
EP3029546B1 (en) Image processing apparatus, control method of image processing apparatus and program
CN103826071A (zh) 用于立体识别和连续跟踪的三维摄像方法
US10713479B2 (en) Motion recognition method and motion recognition device for recognizing motion of user received via NUI device by comparing with preset comparison target information
JP2014220657A (ja) 画像測定装置及び画像測定プログラム
EP3009983A1 (en) Obstacle detection apparatus and method
US10996235B2 (en) System and method for cycle duration measurement in repeated activity sequences
RU2714603C1 (ru) Подвижное стереоскопическое устройство выделения динамических объектов
EP3961556A1 (en) Object recognition device and object recognition method
JP6466679B2 (ja) 物体検出装置
CN105203045A (zh) 一种基于异步时域视觉传感器的产品形状完整性检测系统及检查方法
Kheng et al. Stereo vision with 3D coordinates for robot arm application guide

Legal Events

Date Code Title Description
MM4A The patent is invalid due to non-payment of fees

Effective date: 20160920