PT104224A - Sistema de captura de movimento e localização de objectos recorrendo a emissores de luz coloridos e pulsados com sistema de visão estereoscópico - Google Patents

Sistema de captura de movimento e localização de objectos recorrendo a emissores de luz coloridos e pulsados com sistema de visão estereoscópico Download PDF

Info

Publication number
PT104224A
PT104224A PT10422408A PT10422408A PT104224A PT 104224 A PT104224 A PT 104224A PT 10422408 A PT10422408 A PT 10422408A PT 10422408 A PT10422408 A PT 10422408A PT 104224 A PT104224 A PT 104224A
Authority
PT
Portugal
Prior art keywords
stereoscopic vision
motion capture
colored
leds
intensity
Prior art date
Application number
PT10422408A
Other languages
English (en)
Other versions
PT104224B (pt
Inventor
Paulo Jose Cerqueira Gom Costa
Paulo Sergio Lima Malheiros
Antonio Paulo Gomes Me Moreira
Original Assignee
Univ Do Porto
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Univ Do Porto filed Critical Univ Do Porto
Priority to PT10422408A priority Critical patent/PT104224B/pt
Priority to PCT/IB2009/007186 priority patent/WO2010046759A2/pt
Publication of PT104224A publication Critical patent/PT104224A/pt
Publication of PT104224B publication Critical patent/PT104224B/pt

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/16Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S3/00Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
    • G01S3/78Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using electromagnetic waves other than radio waves
    • G01S3/781Details

Landscapes

  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

A PRESENTE INVENÇÃO DESCREVE UM SISTEMA PARA A CAPTURA (6) DE MOVIMENTO (7) QUE FACILITA A DETECÇÃO DE OBJECTOS (9, 10) NO ESPAÇO RECORRENDO A VISÃO ARTIFICIAL ESTEREOSCÓPICA, UTILIZANDO EMISSORES DE LUZ VISÍVEL (8) DE ALTA INTENSIDADE QUE SE ENCONTRAM SINCRONIZADOS COM O SISTEMA DE VISÃO ESTEREOSCÓPICO, PELO MENOS DUAS CÂMARAS (3,4,5) LIGADAS A UM COMPUTADOR. UM MÓDULO DE SINCRONIZAÇÃO (2) CONTROLA O MOMENTO DE ACTIVAÇÃO DOS EMISSORES DE LUZ (8), GARANTINDO QUE TODAS AS CÂMARAS (3,4,5) ADQUIRAM ESSE MOMENTO EM SIMULTÂNEO. AO UTILIZAR EMISSORES DE LUZ (8) DE ALTA INTENSIDADE E SINCRONIZADOS COM AS CÂMARAS, DISTINGUE-OS DO AMBIENTE CIRCUNDANTE, TORNANDO O SISTEMA ROBUSTO E, COMO APENAS NECESSITAM DE ESTAR LIGADOS POR UM BREVE PERÍODO, SENDO ASSIM A INTENSIDADE APARENTE MUITO BAIXA, NÃO PROVOCAM INTERFERÊNCIA AOS UTILIZADORES (9) DESTE SISTEMA. O USO DE EMISSORES DE VÁRIAS CORES DO ESPECTRO VÍSIVEL PERMITE UMA FÁCIL DETECÇÃO, EVITANDO AMBIGUIDADES E REFORÇANDO A FIABILIDADE.

Description

1
DESCRIÇÃO "SISTEMA. DE CAPTURA DE MOVIMENTO E LOCALIZAÇÃO DE OBJECTOS RECORRENDO A EMISSORES DE LUZ COLORIDOS E PULSADOS COM SISTEMA DE VISÃO ESTEREOSCÓPICO"
Dominio técnico da invenção A presente invenção diz respeito a um sistema de captura de movimento baseado em visão estereoscópica, utilizando duas ou mais câmaras, para detectar e posicionar objectos no espaço com emissores de luz pulsados.
Sumário da invenção A presente invenção descreve um sistema de visão estereoscópica para captura de movimento e localização de objectos caracterizado por compreender emissores (8) de luz coloridos e pulsados como marcadores de posição.
Uma realização preferencial da presente invenção tem a caracteristica de compreender adicionalmente um módulo de sincronização (2) entre os emissores de luz (8) e o sistema de visão estereoscópico (1,3,4,5).
Uma realização mais preferencial da presente invenção tem a caracteristica de os emissores de luz (8) serem LEDs coloridos de alta intensidade.
Uma realização ainda mais preferencial da presente invenção tem a caracteristica de o pulsar dos LEDs (8) ter duração na ordem dos 10E-6 segundos, mais concretamente de 10E-2 a 10E-7 segundos. 2
Uma outra realização preferencial da presente invenção tem a caracteristica de o sistema de sincronismo entre LEDs (8) e câmaras (3,4,5) ser realizado através de uma ligação de dados (13), em particular uma ligação sem fios.
Uma ainda outra realização preferencial da presente invenção tem a caracteristica de comparar duas imagens captadas sucessivamente em que numa delas o pulso foi emitido e na outra não, assim identificando o emissor (8) e minimizando a interferência de outras fontes luminosas.
Antecedentes da invenção 0 documento US20080075324, doravante designado Dl, usa uma matriz de leds para fazer a calibração do sistema de câmaras enquanto que a presente invenção utiliza o próprio objecto de estudo (ferramenta em movimento) para concretizar essa calibração. Esta invenção não precisa de uma ferramenta de calibração especifica: poderá utilizar os marcadores colocados na ferramenta para estabelecer a calibração, precisando apenas de conhecer a distância entre marcadores, permitindo uma maior facilidade e rapidez na calibração deste sistema. 0 documento US20080075324 utiliza leds de apenas uma cor, onde interessa se estes estão ligados ou desligados, enquanto que a presente invenção apresenta leds de diferentes cores do espectro visível onde apenas é necessário estudar o estado em que estes estão activos. 0 que permite que na presente invenção com apenas uma imagem seja encontrado o posicionamento do objecto, enquanto que no documento Dl estes necessitam múltiplas imagens, pois necessitam de verificar o estado ligado/desligado dos vários leds. 3 0 documento JP2003035515 recorre ao uso de múltiplos frames, fotogramas, para codificar a identificação de cada led, enquanto que a presente invenção necessita de apenas um frame. 0 que permite detecções de objectos mais rápidas, essenciais para aplicações em tempo-real. 0 documento US6608688 divulga a utilização de leds infravermelhos enquanto que a presente invenção apresenta o uso de leds coloridos. 0 que permite a utilização de equipamento de visão Standard reduzindo o custo de instalação. Este documento divulga um sistema que requer a utilização de um intervalo de tempo por led, enquanto que a presente invenção apresenta a utilização de todos os leds no mesmo instante de amostragem. 0 que permite a detecção de todos os marcadores por intervalo de tempo, aumentando assim a resolução temporal desta invenção, alcançando também um menor atraso na obtenção da medida. 0 documento JP2004045321 divulga um sistema que necessita de dois ou mais frames, fotograma, para a detecção de cada marcador, enquanto que a presente invenção apresenta um sistema que requer apenas um frame, fotograma, para a detecção dos marcadores. 0 que permite que esta invenção tenha maior resolução temporal e um menor atraso na obtenção da medida.
Descrição geral da invenção 0 objecto do invento relaciona-se com um sistema de captura de movimento baseado em visão estereoscópica. Este sistema utiliza duas ou mais câmaras para detectar e posicionar objectos no espaço utilizando o mesmo principio da visão humana. 4 A captação de imagens de marcadores que representam pontos no espaço por duas ou mais câmaras colocadas em diferentes posições e direcções permite através de técnicas de visão estereoscópica a determinação da localização no espaço desses mesmo marcadores, sendo conhecidas as localizações das câmaras ou, em alternativa, determinar-se a localização das câmaras conhecida a localização dos marcadores. No entanto as técnicas actualmente existentes obrigam a uma iluminação muito cuidada e/ou a utilização de fontes de luz especiais (infravermelhos) e marcadores apropriados. Destes factos resultam sistemas geralmente dispendiosos, com alguma complexidade para se colocar em funcionamento e utilizáveis apenas em ambientes relativamente restritos.
Utilizando-se uma fonte de luz de pequena dimensão mas de elevada potência luminosa e simultaneamente com a capacidade de se ligar e desligar muito rapidamente é possivel através de um circuito electrónico enviar-se, através de fios eléctricos, por rádio ou infravermelhos, um sinal de sincronismo às câmaras e ao circuito de alimentação da fonte luminosa de modo a que o curto periodo de tempo em que a luz está a ser emitida coincida com o tempo de abertura da câmara. A fonte luminosa que se adequa às caracteristicas apresentadas são LEDs (Diodo Emissor de Luz) de alta intensidade. Sendo a intensidade da fonte muito elevada pode-se regular a sensibilidade da câmara de modo a que praticamente só seja visível esse ponto na imagem captada. Assim o sistema fica extremamente robusto em relação a perturbações resultantes da iluminação do ambiente e não precisa que qualquer tipo de iluminação especial. No caso de situações muito difíceis, por exemplo com luz solar directa, pode-se emitir o pulso em apenas algumas das imagens captadas. Comparando-se duas imagens 5 captadas sucessivamente em que numa dela o pulso foi emitido e na outra não, é possível minimizar-se ainda mais a interferência de outras fontes luminosas. 0 facto de ser pulsada permite também que a intensidade de luz aparentemente seja baixa e não incomode ou interfira com as pessoas presentes, além de reduzir o consumo de energia do sistema.
Para se distinguir entre diferentes marcadores utiliza-se emissores de luz de diferentes cores e/ou modular a pulsação de cada marcador com diferentes frequências. Por exemplo um marcador emite um pulso a metade da frequência de aquisição das imagens resultando sucessivamente uma imagem com pulso seguida de uma imagem sem pulso, enquanto que outro marcador emite dois pulsos em duas imagens sucessivas seguindo-se uma imagem sem pulso. 0 uso de vários marcadores diferentes permite também a determinação não só da posição do objecto a medir, assim como a orientação desse mesmo objecto. 0 invento tem como principal vantagem permitir a detecção vários pontos no espaço de forma imediata e com custo muito baixo. A maior parte dos sistemas de captura de movimento apresentam custos elevados tanto no software como no equipamento, necessitando de operadores especializados, factores que tornam estes sistemas proibitivos para pequenas empresas. 0 uso de LEDs de cores diferentes garante alta robustez e fiabilidade abrindo novos ambientes de aplicação.
Descrição das Figuras
Para uma mais fácil compreensão da invenção juntam-se em anexo as figuras, as quais, representam realizações 6 preferenciais do invento que, contudo, não pretendem, limitar o objecto da presente invenção.
Na Figura 1, está ilustrada uma possível aplicação deste sistema no controlo de um manipulador industrial. Duas ou mais câmaras registam o movimento de uma ferramenta equipada com emissores de luz, controlada por um operador. Esse movimento é então utilizado para comandar e/ou programar o movimento do robô industrial.
Na figura, (1) representa o computador anfitrião do sistema; (2) representa um equipamento de sincronização; (3) representa a câmara de vídeo 1; (4) representa a câmara de vídeo 2; (5) representa a câmara de vídeo N; (6) representa a trajectória do robô; (7) representa a trajectória humana; (8) representa os emissores de luz pulsados; (9) representa o operador humano; e (10) representa o robô.
Na Figura 2 está ilustrada uma aplicação de orientação de robôs móveis. O robô observa os marcadores distribuídos no tecto e comparando com um mapa existente em computador consegue posicionar-se correctamente no mundo.
Na figura, (1) representa o computador anfitrião do sistema; (2) representa um equipamento de sincronização; (3) representa a câmara de vídeo 1; (4) representa a câmara de vídeo 2; (8) representa os emissores de luz pulsados; 7 7 (10) representa o robô, move. (11) representa uma unidade luz ; (12) representa o tecto; e (13) representa um sinal rád. 1 neste caso; de de controlo dos emissores io de sincronização.
Lisboa, 21 de Outubro de 2009

Claims (6)

1 REIVINDICAÇÕES 1. Sistema de visão estereoscópica para captura de movimento e localização de objectos caracterizado por compreender emissores (8) de luz coloridos e pulsados como marcadores de posição.
2. Sistema de acordo com a reivindicação anterior caracterizado por compreender adicionalmente um módulo de sincronização (2) entre os emissores de luz (8) e um sistema de visão estereoscópico (1,3,4,5).
3. Sistema de acordo com a reivindicação anterior caracterizado por os emissores de luz (8) serem LEDs coloridos de alta intensidade.
4. Sistema de acordo com a reivindicação anterior caracterizado por o pulsar dos LEDs (8) ter duração de cerca de 10E-6 segundos, no intervalo de 10E-2 a 10E-7 segundos.
5. Sistema de acordo com a reivindicação anterior caracterizado por o sistema de sincronismo entre LEDs (8) e câmaras (3,4,5) ser realizado através de uma ligação de dados (13), em particular uma ligação sem fios.
6. Sistema de acordo com qualquer uma das reivindicações anteriores caracterizado por comparar duas imagens captadas sucessivamente em que numa delas o pulso foi emitido e na outra não, assim identificando o emissor (8) e minimizando a interferência de outras fontes luminosas. Lisboa, 21 de Outubro de 2009
PT10422408A 2008-10-21 2008-10-21 Sistema de captura de movimento e localização de objectos recorrendo a emissores de luz coloridos e pulsados com sistema de visão estereoscópico PT104224B (pt)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PT10422408A PT104224B (pt) 2008-10-21 2008-10-21 Sistema de captura de movimento e localização de objectos recorrendo a emissores de luz coloridos e pulsados com sistema de visão estereoscópico
PCT/IB2009/007186 WO2010046759A2 (pt) 2008-10-21 2009-10-21 Sistema de captura de movimento 3d e localizaçao de objectos recorrendo a emissores de luz sincronizados com sistema de visão estereoscópico

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PT10422408A PT104224B (pt) 2008-10-21 2008-10-21 Sistema de captura de movimento e localização de objectos recorrendo a emissores de luz coloridos e pulsados com sistema de visão estereoscópico

Publications (2)

Publication Number Publication Date
PT104224A true PT104224A (pt) 2010-04-21
PT104224B PT104224B (pt) 2010-12-27

Family

ID=42119754

Family Applications (1)

Application Number Title Priority Date Filing Date
PT10422408A PT104224B (pt) 2008-10-21 2008-10-21 Sistema de captura de movimento e localização de objectos recorrendo a emissores de luz coloridos e pulsados com sistema de visão estereoscópico

Country Status (2)

Country Link
PT (1) PT104224B (pt)
WO (1) WO2010046759A2 (pt)

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3917412A (en) * 1972-04-11 1975-11-04 Us Navy Advanced helmet tracker using lateral photodetection and light-emitting diodes
US4649504A (en) * 1984-05-22 1987-03-10 Cae Electronics, Ltd. Optical position and orientation measurement techniques
JP2002510803A (ja) 1998-04-03 2002-04-09 イメージ・ガイディッド・テクノロジーズ・インコーポレイテッド 位置測定のためのワイヤレス光学機器
JP2003035515A (ja) 2001-07-23 2003-02-07 Nippon Telegr & Teleph Corp <Ntt> 三次元位置検出方法,装置および三次元位置検出用のマーカ
DE10226398B4 (de) * 2002-06-13 2012-12-06 Carl Zeiss Ag Verfahren und Vorrichtung zum Erfassen der Lage eines Objekts im Raum
JP2004045321A (ja) 2002-07-15 2004-02-12 Mitsubishi Electric Corp 位置計測システム
JP3779308B2 (ja) 2004-07-21 2006-05-24 独立行政法人科学技術振興機構 カメラ校正システム及び三次元計測システム

Also Published As

Publication number Publication date
PT104224B (pt) 2010-12-27
WO2010046759A3 (pt) 2010-08-26
WO2010046759A4 (pt) 2010-10-28
WO2010046759A2 (pt) 2010-04-29

Similar Documents

Publication Publication Date Title
CN106524922B (zh) 测距校准方法、装置和电子设备
CN108957425B (zh) 用于LiDAR测光系统的模拟设备
CN106681510B (zh) 位姿识别装置、虚拟现实显示装置以及虚拟现实系统
US11490490B2 (en) Hyperbright motion flood light
US7123351B1 (en) Method and apparatus for measuring distances using light
US10448006B2 (en) People sensing system
US20140043622A1 (en) System for measuring the position and movement of an object
CN108957467B (zh) 用于旋转式LiDAR测光系统的模拟设备
US20070095617A1 (en) Device and method for self-alighning position reference system
US20110089841A1 (en) Control information for controlling light-system
US20180054876A1 (en) Out of plane sensor or emitter for commissioning lighting devices
US7728817B2 (en) Optical navigation system with multiplexed image processing
CN216565270U (zh) 图像扫描系统
CN107782354B (zh) 动作传感器检测系统以及方法
CN107990873B (zh) 一种用led智能灯定位的方式
PT104224A (pt) Sistema de captura de movimento e localização de objectos recorrendo a emissores de luz coloridos e pulsados com sistema de visão estereoscópico
JP2020501306A (ja) 加速度計又は傾斜センサを使用したヨーインディケーション
CN111183366B (zh) 用于监控机动车的模拟装置
JP7105059B2 (ja) 内部センサによる相対測位
TWI638222B (zh) 相機檢測裝置及檢測相機之方法
US20140132500A1 (en) Method and apparatus for recognizing location of moving object in real time
CN114847880A (zh) 用于检测睡眠信息的智能设备和方法
CN106405497B (zh) 一种定位标签
CN213581348U (zh) 无人机定位装置和无人机
KR101550563B1 (ko) 조명등 및 이미지 센서를 이용한 위치 측위 방법 및 장치

Legal Events

Date Code Title Description
BB1A Laying open of patent application

Effective date: 20100315

FG3A Patent granted, date of granting

Effective date: 20101221