ES2704458T3 - Procedimiento y disposición para registrar informaciones acústicas y ópticas, así como un programa informático correspondiente y un medio de memoria correspondiente legible por ordenador - Google Patents

Procedimiento y disposición para registrar informaciones acústicas y ópticas, así como un programa informático correspondiente y un medio de memoria correspondiente legible por ordenador Download PDF

Info

Publication number
ES2704458T3
ES2704458T3 ES15182763T ES15182763T ES2704458T3 ES 2704458 T3 ES2704458 T3 ES 2704458T3 ES 15182763 T ES15182763 T ES 15182763T ES 15182763 T ES15182763 T ES 15182763T ES 2704458 T3 ES2704458 T3 ES 2704458T3
Authority
ES
Spain
Prior art keywords
microphones
acoustic
recording
geometry data
optical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
ES15182763T
Other languages
English (en)
Inventor
Dirk Döbler
Gunnar Heilmann
Andy Meyer
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ges Zur Foerderung Angewandter Informatik E V
Original Assignee
Ges Zur Foerderung Angewandter Informatik E V
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ges Zur Foerderung Angewandter Informatik E V filed Critical Ges Zur Foerderung Angewandter Informatik E V
Application granted granted Critical
Publication of ES2704458T3 publication Critical patent/ES2704458T3/es
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/02—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems using reflection of acoustic waves
    • G01S15/06—Systems determining the position data of a target
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B17/00—Measuring arrangements characterised by the use of infrasonic, sonic or ultrasonic vibrations
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01H—MEASUREMENT OF MECHANICAL VIBRATIONS OR ULTRASONIC, SONIC OR INFRASONIC WAVES
    • G01H9/00—Measuring mechanical vibrations or ultrasonic, sonic or infrasonic waves by using radiation-sensitive means, e.g. optical means
    • G01H9/002—Measuring mechanical vibrations or ultrasonic, sonic or infrasonic waves by using radiation-sensitive means, e.g. optical means for representing acoustic field distribution
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/18—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using ultrasonic, sonic, or infrasonic waves
    • G01S5/20—Position of source determined by a plurality of spaced direction-finders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/207—Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/221—Image signal generators using stereoscopic image cameras using a single 2D image sensor using the relative movement between cameras and objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/296—Synchronisation thereof; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/027—Spatial or constructional arrangements of microphones, e.g. in dummy heads
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2203/00—Details of circuits for transducers, loudspeakers or microphones covered by H04R3/00 but not provided for in any of its subgroups
    • H04R2203/12—Beamforming aspects for stereophonic sound reproduction with loudspeaker arrays

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Acoustics & Sound (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

Procedimiento para registrar informaciones acústicas y ópticas mediante al menos de un conjunto de micrófonos (102, 102') y al menos un dispositivo para el registro de datos de geometría ópticos, configurado como escáner 3D o sistema de cámara 3D, en donde el al menos un conjunto de micrófonos (102, 102') y el al menos un dispositivo para el registro de datos de geometría ópticos están dispuestos en relación de posición definida y en donde el al menos un conjunto de micrófonos (102, 102') y el al menos un dispositivo para el registro de datos de geometría ópticos están unidos de manera fija entre sí al menos durante el registro de las informaciones acústicas y ópticas, en donde: - las informaciones acústicas emitidas por un objeto (106) y la geometría del objeto (106) se registran simultáneamente; - el conjunto de micrófonos (102, 102') y el al menos un dispositivo para el registro de datos de geometría ópticos y el objeto (106) se mueven en relación el uno hacia el otro.

Description

DESCRIPCIÓN
Procedimiento y disposición para registrar informaciones acústicas y ópticas, así como un programa informático correspondiente y un medio de memoria correspondiente legible por ordenador
La invención se refiere a un procedimiento y una disposición para registrar informaciones acústicas y ópticas, que pueden utilizarse en particular para crear mapas de sonido tridimensionales. Los mapas de sonido pueden visualizarse y estar provistos con datos referentes a fuentes de sonido, potencia acústica y características de emisión.
Estado de la técnica
La conformación de haces (beamforming) con conjuntos de micrófono para la localización de fuentes de sonido se ha desarrollado en los últimos 10 años a nivel internacional como estado de la técnica. En este sentido se conectan un número micrófonos de manera fija con una o varias cámaras de video y se graban digitalmente en paralelo al campo acústico y al vídeo. A partir de los datos de los micrófonos, el campo acústico se descompone con distintos procedimientos de procesamiento de señales asistidos por ordenador de nuevo en sus fuentes individuales y el mapa de sonido obtenido se superpone con la imagen de vídeo. De este modo las fuentes de sonido se asocian a los objetos correspondientes. También se ha establecido la conformación de haces tridimensional. En este sentido, para el cálculo y representación de las fuentes de sonido se utiliza un modelo 3D del objeto emisor de sonido. Mediante el submuestreo espacial aparecen lóbulos laterales (fuentes laterales o fuentes ficticias), que limitan la dinámica del mapa de sonido y dificultan la interpretación de las imágenes acústicas. El submuestreo espacial del campo acústico se forma mediante el número de micrófonos y del patrón de recepción del conjunto de micrófonos que ha resultado del mismo, limitado por motivos de costes y de manipulación. El mapa de sonido es siempre una convolución del patrón de recepción del conjunto con el campo acústico real (ilustración 1 e ilustración 2). En teoría sería necesario un número muy grande de micrófonos en muchas posiciones espaciales distintas con el fin de garantizar una exploración completa. Dado que esto no es posible existen diferentes procedimientos de procesamiento de señales ampliados (CLEAN-SC, HDR, DAMAS, conformación de haces ortogonal), que pueden mejorar los resultados. Las informaciones, que no están presentes en los datos de medición, sin embargo, tampoco pueden reconstruirse mediante algoritmos complejos
Mediante el submuestreo espacial tampoco puede realizarse igualmente ninguna declaración sobre las características de emisión (monopolo, dipolo, cuádruplo) de las fuentes de sonido determinadas, dado que el conjunto de micrófonos mide la fuente acústica solo por una posición. Sin embargo estas declaraciones son importantes para evaluar las fuentes de sonido.
Igualmente, con los procedimientos anteriores no puede emitirse una declaración sobre la potencia acústica irradiada de las fuentes de sonido que se han determinado. También para ello el campo acústico irradiado alrededor de las fuentes debería registrarse de la manera más completa posible.
Para el cálculo correcto del mapa de sonido puede determinarse además la distancia exacta de cada micrófono en cualquier punto de la superficie del objeto. Para superficies planas se determina por regla general directamente la distancia del conjunto de micrófonos con respecto a la superficie de objeto, debiendo ser superficie y eje de conjunto perpendiculares entre sí. Para objetos con una profundidad estructural muy intensa o mediciones en espacios internos debe presentarse un modelo 3D, cuya facilitación requiere una complejidad adicional. Además, en este caso debe realizarse también un ajuste, es decir ha de determinarse la posición relativa del conjunto de micrófonos con respecto al modelo 3D.
El documento EP 2182334 A1 describe un dispositivo de medición para registrar fuentes de ruido dentro de un espacio definido. Con el sistema descrito en este caso las mediciones para el registro de los datos de geometría y las mediciones para el registro de los datos acústicos deben llevarse a cabo sucesivamente.
El objetivo de la invención consiste por lo tanto en facilitar un procedimiento, así como una disposición para registrar informaciones acústicas y ópticas que eliminen las desventajas de las soluciones conocidas y posibiliten en particular aumentar el número de los puntos de exploración espacial, sin aumentar el número de los micrófonos físicamente presentes.
Este objetivo se consigue según la invención mediante las características en las reivindicaciones 1 y 8. Configuraciones convenientes de la invención están incluidas en las reivindicaciones dependientes. Una ventaja especial de la invención consiste, entre otros, en que el problema del submuestreo espacial del campo acústico de objetos se reduce intensamente y con ello se eliminan fuentes laterales o fuentes ficticias. Esto se consigue utilizando, en el procedimiento de acuerdo con la invención al menos un conjunto de micrófonos y al menos un dispositivo para el registro de datos de geometría ópticos. El al menos un conjunto de micrófonos y el al menos un dispositivo para el registro de datos de geometría ópticos están dispuestos en este sentido en una relación de posición definida relativamente el uno hacia el otro. Según la invención el(los) conjunto(s) de micrófonos y el dispositivo(s) para registrar datos de geometría ópticos al menos durante el registro de informaciones acústicas y ópticas están unidos entre sí de manera fija. Especialmente ha resultado ser ventajoso cuando el (los) conjunto(s) de micrófonos y el (los) dispositivo(s) para registrar datos de geometría ópticos están unidos entre sí de manera separable.
Sin embargo, un conjunto de micrófonos comprende al menos dos micrófonos, preferiblemente un gran número de micrófonos, por ejemplo, de 48 micrófonos hasta 120 micrófonos. El número de los micrófonos depende en este sentido del campo de aplicación, de la geometría del objeto y/o de la naturaleza de la fuente acústica y puede sobrepasar también el número de 120.
En una forma de realización preferida está previsto como dispositivo para el registro de datos de geometría ópticos una utilización de escáneres 3D, por ejemplo un escáner láser. Ha resultado ser ventajoso utilizar un escáner de luz estructurada o un sistema de cámara 3D, que funciona según el procedimiento de tiempo de propagación (Time Of Flight, TOF). A partir de las informaciones 3D registradas se genera un modelo 3D preferiblemente mediante un equipo de procesamiento de datos.
Según una forma de realización preferida está previsto adicionalmente que además de el al menos un conjunto de micrófonos y del al menos un dispositivo para el registro de datos de geometría ópticos se utilice al menos una cámara. Esto tiene la ventaja de que el modelo 3D generado pueda combinarse, en particular solaparse, con las informaciones (de color) ópticas.
Según la invención las informaciones acústicas emitidas por el objeto o señales se registran mediante el al menos un conjunto de micrófonos, y la geometría, es decir la configuración de la superficie del objeto, se registra mediante el al menos un dispositivo para el registro de datos de geometría ópticos. Para ello el (los) conjunto (s) de micrófonos y el dispositivo(s) para registrar datos de geometría ópticos, por un lado, y el objeto, por otro lado, se mueven relativamente unos hacia otros. El movimiento (relativo) puede realizarse manualmente. En una forma de realización alternativa está previsto que el movimiento (relativo) se lleve a cabo de manera automatizada, preferiblemente con ayuda de un control automático.
Preferiblemente la relación de posición relativa entre el al menos un conjunto de micrófonos y el al menos un dispositivo para el registro de datos de geometría ópticos permanece invariable durante el movimiento (relativo). Preferiblemente el registro de las informaciones acústicas y de la geometría del objeto se realiza simultáneamente. Según una forma de realización preferida el (los) conjunto(s) de micrófonos y el dispositivo(s) para registrar datos de geometría ópticos se mueve hacia un número de posiciones discretas que puede predeterminarse, en los cuales se registran en cada caso las informaciones acústicas y ópticas. En una forma de realización alternativa está previsto que se registren las informaciones acústicas y ópticas continuamente durante el movimiento (relativo).
Dependiendo de los objetos y/o informaciones acústicas que van a registrarse puede resultar ventajoso cuando el registro de las informaciones acústicas y ópticas se realiza en al menos una parte de las diferentes posiciones con en cada caso una relación de posición relativa diferente.
Según una forma de realización preferida adicional para al menos una parte de las posiciones de registro, preferiblemente para todas las posiciones de registro, se registra el lugar espacial (coordenadas de lugar absolutas x, y, z o coordenadas de lugar relativas x', y', z' con respecto al objeto) y la orientación (datos de ángulo, por ejemplo, ángulo de Euler) del al menos un conjunto de micrófonos y del al menos un dispositivo para el registro de datos de geometría ópticos. Ha resultado ser ventajoso cuando el al menos un conjunto de micrófonos y el al menos un dispositivo para el registro de datos de geometría ópticos se reúnen como un sistema y el sistema se enlaza de manera fija con un sistema de coordenadas. Para determinar las coordenadas de lugar y coordenadas de ángulo absolutas o relativas se compara la posición y orientación del sistema de coordenadas enlazado con el sistema con un sistema de coordenadas mundial (coordinadas absolutas) o con un sistema de coordenadas que está enlazado con el objeto (coordinadas relativas). En particular está previsto que la relación de posición relativa del al menos un conjunto de micrófonos y del al menos un dispositivo para el registro de datos de geometría ópticos se registre con respecto al objeto y se grabe. En particular se registra la distancia del al menos un conjunto de micrófonos y del al menos un dispositivo para el registro de datos de geometría ópticos mediante el objeto y la dirección del al menos un conjunto de micrófonos y del al menos un dispositivo para el registro de datos de geometría ópticos con respecto al del objeto y, preferiblemente se graba como trayectoria.
Con ayuda de los datos geométricos registrados según una forma de realización preferida, mediante la utilización de procedimientos de cálculo asistidos por ordenador (stitching) se crea un modelo 3D del objeto. Preferiblemente la creación del modelo 3Ds se realiza durante el registro de las informaciones geométricas. En particular está previsto calcular el modelo 3D a partir de imágenes de profundidad (individuales) ya registradas. La unión de las imágenes de profundidad 3D individuales hasta formar un objeto completo se facilita en gran medida cuando en el sistema de medición está integrado un sensor de registro de posición 3d y sensor de aceleración (por ejemplo, un giroscopio), que registra también la posición y el movimiento (trayectoria) del dispositivo para el registro de datos de geometría ópticos (por ejemplo, una cámara [óptica]).
A partir de las informaciones acústicas registradas se calcula un mapa de sonido (de suma), habiendo de aludir el concepto "suma" únicamente a que el mapa de sonido (de suma) se ha creado mediante varios mapas de sonido individuales, no se refiere a una limitación a una suma de mapas de sonido. Preferiblemente el mapa de sonido (de suma) se genera como mapa de sonido tridimensional. Según una forma de realización preferida para ello se combinan, preferiblemente se suman y se toma el promedio de manera ponderada mapas de sonido de forma individual (mapas de sonido individuales), que se han calculado para diferentes posiciones con ayuda de algoritmos de conformación de haces. Preferiblemente se determinan características de emisión de fuentes de sonido individuales en diferentes direcciones. Según una forma de realización preferida adicional se determina la potencia acústica total y/o la potencia acústica de fuentes de sonido parciales del objeto. Ha resultado ser ventajoso cuando para ello se explora la envolvente del campo acústico. Según una forma de realización preferida adicional la combinación de los mapas de sonido individuales comprende la eliminación de fuentes de sonido ficticias y/o reflexiones, preferiblemente mediante promediación.
Según una forma de realización preferida está previsto adicionalmente que al menos una parte de los mapas de sonido, preferiblemente todos los mapas de sonido se superpongan internamente en el ordenador al modelo 3D se proyecte al modelo 3D. En particular está previsto que el mapa de sonido (de suma) combinado de mapas de sonido individuales se superponga al modelo 3D o se proyecte al modelo 3D. Por ello se consigue que fuentes de sonido individuales, preferiblemente con características acústica y/o potencia acústica, se asocien de manera mejorada al objeto. Según una forma de realización preferida se visualizan al menos partes del modelo 3Ds con mapa de sonido (de suma) superpuesto o proyectado. Ha resultado ser ventajoso, cuando en este sentido se describen con más detalle características acústicas mediante una marcación óptica, por ejemplo, una flecha.
Una disposición según la invención presenta al menos un chip y/o procesador, al menos un conjunto de micrófonos y al menos un dispositivo para el registro de datos de geometría ópticos, en la que el al menos un conjunto de micrófonos y el al menos un dispositivo para el registro de datos de geometría ópticos están dispuestos en relación de posición definida, y está configurados de tal modo que puede llevarse a cabo un procedimiento para registrar informaciones acústicas y ópticas, registrándose informaciones acústicas emitidas por un objeto y la geometría del objeto, al moverse el al menos un conjunto de micrófonos, el al menos un dispositivo para el registro de datos de geometría ópticos y el objeto relativamente los unos hacia los otros.
Según una forma de realización preferida la disposición comprende un sensor de detección de posición en 3D y sensor de aceleración (preferiblemente un giroscopio). Preferiblemente el sensor de detección de posición en 3D y sensor de aceleración están integrados en el dispositivo para el registro de datos de geometría ópticos. Por lo tanto, la trayectoria de la disposición, en particular del dispositivo para el registro de datos de geometría ópticos durante el registro de las informaciones acústicas y ópticas para al menos posiciones individuales, preferiblemente para todas las posiciones de la disposición o del dispositivo para el registro de datos de geometría ópticos puede registrarse igualmente y preferiblemente grabarse. En una forma de realización preferida está previsto al menos utilizar los datos de posición 3D (en particular coordenadas de lugar y coordenadas de ángulo) registrados por el sensor de detección de posición en 3D y sensor de aceleración, para calcular a partir de las imágenes de profundidad el modelo 3D del objeto.
Un programa informático de acuerdo con la invención posibilita a un equipo de procesamiento de datos, después de que se haya cargado en la memoria del equipo de procesamiento de datos, en cooperación con al menos un conjunto de micrófonos y al menos un dispositivo para el registro de datos de geometría ópticos, que están dispuestos en una relación de posición definida los unos hacia los otros, llevar a cabo un procedimiento para registrar informaciones acústicas y ópticas, en el que se registran informaciones acústicas emitidas por un objeto y la geometría del objeto, al moverse relativamente los unos hacia los otros el al menos un conjunto de micrófonos, el al menos un dispositivo para el registro de datos de geometría ópticos y el objeto.
En una forma de realización preferida adicional de la invención está previsto que el programa informático de acuerdo con la invención tenga una estructura modular, estando instalados módulos individuales en diferentes equipos de procesamiento de datos.
Formas de realización ventajosas prevén adicionalmente programas informáticos a través de los cuales pueden llevarse a cabo etapas de procedimiento o desarrollos de procedimiento adicionales indicados en la descripción. Tales programas informáticos pueden descargarse por ejemplo (a cambio de una tasa, o gratuitamente, con acceso libre o protegidos con contraseña) en una red de datos o red de comunicación. Los programas informáticos facilitados de este modo pueden aprovecharse gracias a un procedimiento en el que un programa informático según la reivindicación 10 se descarga desde una red de datos electrónica, como por ejemplo de internet, a un equipo de procesamiento de datos conectado a la red de datos.
Para llevar a cabo el procedimiento de acuerdo con la invención está previsto utilizar un medio de memoria legible por ordenador en el que está almacenado un programa que posibilita a un equipo de procesamiento de datos, después de que se haya cargado en la memoria del equipo de procesamiento de datos, en cooperación con al menos un conjunto de micrófonos y al menos un dispositivo para el registro de datos de geometría ópticos, que están dispuestos unos hacia otros en relación de posición definida, llevar a cabo un procedimiento para registrar informaciones acústicas y ópticas, en el que se registran informaciones acústicas emitidas por un objeto y la geometría del objeto, al moverse relativamente el uno hacia el otro el al menos un conjunto de micrófonos, el al menos un dispositivo para el registro de datos de geometría ópticos y el objeto.
La invención ofrece con respecto al estado de la técnica un número de ventajas. De este modo el objeto emisor de sonido durante la medición acústica se escanea y se almacena como modelo 3D. Preferiblemente el objeto se escanea en tres dimensiones. Como alternativa sin embargo puede estar previsto también que el modelo 3D se genere a partir de las informaciones (en 2D) ópticas. Se omite un escáner 3D adicional. Dado que se ha grabado la posición relativa del conjunto de micrófonos con respecto al objeto se omiten también la medición de la distancia y el ajuste el conjunto con respecto al objeto.
El campo acústico (estacionario) se registra a partir de muchas posiciones diferentes. Mediante la suma y promediación ponderada de un gran número de mapas de sonido (con la Kinect aproximadamente 25 mapas de sonido) se identifican de manera inequívoca las fuentes reales, lóbulos laterales (fuentes ficticias) y reflexiones se toma el promedio a partir de esto. La calidad de la imagen acústica se corresponde con el resultado de un aumento real mucho más complejo del número de micrófonos.
Mediante la trayectoria de movimiento grabada se conocen en cada momento las distancias correctas de los micrófonos con respecto al objeto emisor de sonido. No aparecen errores de enfoque, pueden determinarse exactamente intensidades de emisión
Mediante la medición de las fuentes de sonido desde muchas direcciones diferentes son posibles declaraciones sobre las características de emisión de las fuentes de sonido. Estas pueden marcarse en el mapa de sonido creada en tres dimensiones, por ejemplo, en forma de flechas de dirección, en el que la longitud de las flechas indica la intensidad de emisión de la fuente en la dirección correspondiente.
Mediante la exploración de la "envolvente" del campo acústico pueden emitirse declaraciones sobre la potencia acústica como también sobre las potencias acústicas de las fuentes de sonido parciales.
La invención se explica a continuación con más detalle con referencia a las figuras de los dibujos en un ejemplo de realización. Muestra:
la figura 1 una ilustración esquemática del procedimiento de acuerdo con la invención;
la figura 2 una visualización a modo de ejemplo del campo acústico de dos fuentes de sonido, que se ha captado con un conjunto de micrófonos de 48 canales y,
la figura 3 una visualización a modo de ejemplo del campo acústico de dos fuentes de sonido, que se ha captado con un conjunto de micrófonos de 120 canales.
A continuación, la invención va a explicarse con más detalle mediante una forma de realización a modo de ejemplo. Según el ejemplo de realización un conjunto de micrófonos en forma de anillo 102, 102', que está dispuesto en una relación de posición definida con respecto a uno o varios escáneres 3D 104, 104', da la vuelta alrededor de un objeto 106. Como conjunto de micrófonos, en lugar del conjunto de micrófonos en forma de anillo 102, 102' pueden utilizarse también conjuntos de micrófono o conjuntos lineales, en forma de cruz, esféricos con micrófonos 108, 108' distribuidos de manera aleatoria. Igualmente, en lugar del al menos un escáner 3Ds 104, 104' pueden utilizarse una o varias cámaras de video. En la utilización de cámaras de video el objeto emisor de sonido se registra en dos dimensiones y el modelo 3D del objeto se crea por ejemplo mediante reconstrucción fotogramétrica en 3D, tal como se describe por ejemplo en la publicación: Rodehorst, Volker: Photogrammetrische 3D-Rekonstruktion im Nahbereich durch Auto-Kalibrierung mit projektiver Geometrie, Wissenschaftlicher Verlag, Berlin 2004.
Igualmente el procedimiento a modo de ejemplo puede modificarse también en el sentido de que el conjunto de micrófonos 102, 102' no da la vuelta alrededor del objeto 106, sino que el objeto se mueve con respecto a un conjunto de micrófonos 102, 102' dispuesto de manera estacionaria. Pueden moverse también tanto el conjunto de micrófonos 102, 102' como el objeto 106 durante el registro de las informaciones acústicas y ópticas.
La invención propone un dispositivo y un procedimiento con cuya ayuda es posible aumentar considerablemente el número de los puntos de exploración espaciales, sin aumentar realmente el número de los micrófonos 108, 108' físicamente presentes. Para ello se unen mecánicamente micrófonos 108, 108' en una posición relativa definida con uno o varios escáneres 3D 104, 104' con registro de posición integrado. Preferiblemente los micrófonos 108, 108' y el al menos un escáner 3D 104, 104' están unidos entre sí de manera mecánica de manera fija, pero de forma separable. De manera adicionalmente preferible, durante el registro de las informaciones acústicas y ópticas la relación de posición de los micrófonos 108, 108' no varía con respecto al al menos un escáner 3Ds 104, 104'. El dispositivo 110, 110' de micrófonos 108, 108' y escáner 3D(n) 104, 104' da la vuelta ahora alrededor del objeto que va a medirse 106 manualmente o de modo automatizado con el fin de explorar el campo acústico 112 con los micrófonos 108, 108' en muchos lugares diferentes y desde muchas direcciones diferentes. Para ello el objeto 106 naturalmente no debería moverse y las fuentes de sonido 114 del objeto 106 deberían se estacionarias al menos de manera repetida. Al mismo tiempo con el escáner 3D 104, 104' integrado tiene lugar un registro tridimensional del objeto emisor de sonido 106, en el que las imágenes individuales de profundidad captadas durante el proceso de barrido se calculan (stitching) hasta formar un modelo completo. Posición y dirección del escáner 3D 104, 104' (registro de posición) y por tanto las posiciones de micrófono con respecto al objeto 3D 106 se graban igualmente también durante la medición (trayectoria de movimiento 116). Para ello preferiblemente el dispositivo 110, 110' se enlaza con un sistema de coordenadas 118, 118'. Con respecto al sistema de coordenadas 118, 118' las coordenadas de micrófono locales (lugar y ángulo) y las coordenadas de escáner locales (lugar y ángulo) son conocidas. La posición (lugar) y orientación (ángulo) del sistema de coordenadas 118, 118' se registra igualmente y se graba en las posiciones de registro, es decir en las posiciones en las que se registran informaciones acústicas y/u ópticas.
Como escáner 3D 106 puede utilizarse por ejemplo una cámara utilizada para el control de movimiento de juegos de ordenador (por ejemplo una cámara Kinect® de Microsoft™), este escáner suministra también imágenes de cámara normales (vídeo) durante la medición, de modo que el conjunto de micrófonos 102, 102' puede utilizarse sin reconstrucciones también para aplicaciones en 2D.
En la valoración siguiente ahora para cada posición del escáner 3D 104, 104' se determinan las correspondientes coordenadas de micrófono. Con ello, con los algoritmos de conformación de haces conocidos para cada posición del conjunto de micrófonos 102, 102' se calcula un mapa de sonido y se proyecta hacia el modelo 3D del objeto 106. En este sentido no se calculan zonas cubiertas (efectos de sombra, que no pueden registrarse por el escáner 3D 104, 104' desde la posición respectiva). Los mapas de sonido individuales calculados desde las distintas posiciones de conjuntos se suman y se toma el promedio a continuación de manera ponderada. En este sentido pueden calcularse entonces las características de emisión de las fuentes de sonido 114 hacia las distintas direcciones.
Naturalmente el dispositivo 110, 110' también puede utilizarse de manera estacionaria, moviéndose entonces los objetos que van a escanearse 106. En una realización adicional entonces, tanto el dispositivo 110, 110' como los objetos de medición 106 pueden disponerse de forma estática. La escena se registra entonces solo por una posición de forma tridimensional. Adicionalmente a una foto o vídeo de la escena, para cada imagen entonces se suministra una información de profundidad.
La invención en su forma de realización no se limita a los ejemplos de realización preferidos que se han descrito anteriormente. Más bien, es concebible un número de variantes que hacen uso de la disposición de acuerdo con la invención, del procedimiento de acuerdo con la invención, del programa informático de acuerdo con la invención y del medio de memoria legible por ordenador de acuerdo con la invención, también en el caso de realizaciones configuradas fundamentalmente de otro modo.
Números de referencia
102 conjunto de micrófonos
102' conjunto de micrófonos
104 escáner3D
104' escáner 3D
106 objeto
108 micrófono
108' micrófono
110 dispositivo
110' dispositivo
112 campo acústico
114 fuentes de sonido
116 trayectoria de movimiento
118 sistema de coordenadas
118' sistema de coordenadas

Claims (8)

REIVINDICACIONES
1. Procedimiento para registrar informaciones acústicas y ópticas mediante al menos de un conjunto de micrófonos (102, 102') y al menos un dispositivo para el registro de datos de geometría ópticos, configurado como escáner 3D o sistema de cámara 3D, en donde el al menos un conjunto de micrófonos (102, 102') y el al menos un dispositivo para el registro de datos de geometría ópticos están dispuestos en relación de posición definida y en donde el al menos un conjunto de micrófonos (102, 102') y el al menos un dispositivo para el registro de datos de geometría ópticos están unidos de manera fija entre sí al menos durante el registro de las informaciones acústicas y ópticas, en donde: - las informaciones acústicas emitidas por un objeto (106) y la geometría del objeto (106) se registran simultáneamente;
- el conjunto de micrófonos (102, 102') y el al menos un dispositivo para el registro de datos de geometría ópticos y el objeto (106) se mueven en relación el uno hacia el otro.
2. Procedimiento según la reivindicación 1, en donde el registro de las informaciones acústicas y ópticas se realiza con una relación de posición invariable, o en donde el registro de las informaciones acústicas y ópticas se realiza con diferentes relaciones de posición.
3. Procedimiento según las reivindicaciones 1 o 2, en donde el al menos un conjunto de micrófonos (102, 102'), el al menos un dispositivo para el registro de datos de geometría ópticos y/o el objeto (106) se mueven manualmente o de manera automatizada.
4. Procedimiento según una de las reivindicaciones anteriores, en donde para al menos algunas posiciones del al menos un conjunto de micrófonos (102, 102') y del al menos un dispositivo para el registro de datos de geometría ópticos se registra coordenadas de lugar y coordenadas de ángulo y se graban preferiblemente como trayectoria (116).
5. Procedimiento según una de las reivindicaciones anteriores, en el que a partir de imágenes de profundidad que se han generado a partir de datos de geometría ópticos registrados, se genera un modelo 3D, preferiblemente asistido por ordenador y de manera automatizada.
6. Procedimiento según una de las reivindicaciones anteriores, en el que a partir de las informaciones acústicas registradas mediante el al menos un conjunto de micrófonos (102, 102') en al menos una parte de las posiciones se genera en cada caso un mapa de sonido individual, y a partir de al menos una parte de los mapas de sonido individuales se calcula un mapa de sonido común, calculándose preferiblemente características acústicas y/o potencias acústicas de fuentes de sonido.
7. Procedimiento según una de las reivindicaciones 4 a 6, en el que las coordenadas de lugar, las coordenadas angulares, las imágenes de profundidad individuales y/o los mapas de sonido individuales se registran en posiciones de registro discretas o continuamente.
8. Disposición para registrar informaciones acústicas y ópticas, que comprende
- al menos un equipo de procesamiento de datos,
- al menos un conjunto de micrófonos (102, 102') y
- al menos un dispositivo para el registro de datos de geometría ópticos configurado como escáner 3D o sistema de cámara 3D,
en donde el al menos un conjunto de micrófonos (102, 102') y el al menos un dispositivo para el registro de datos de geometría ópticos están dispuestos en relación de posición definida, caracterizada porque el al menos un conjunto de micrófonos (102, 102') y el al menos un dispositivo para el registro de datos de geometría ópticos al menos durante el registro de las informaciones acústicas y ópticas están unidos de manera fija entre sí, y porque la disposición está configurada de tal manera que puede llevarse a cabo un procedimiento según una de las reivindicaciones 1 a 7.
ES15182763T 2014-09-03 2015-08-27 Procedimiento y disposición para registrar informaciones acústicas y ópticas, así como un programa informático correspondiente y un medio de memoria correspondiente legible por ordenador Active ES2704458T3 (es)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102014217598.4A DE102014217598A1 (de) 2014-09-03 2014-09-03 Verfahren und Anordnung zur Erfassung von akustischen und optischen Informationen sowie ein entsprechendes Computerprogramm und ein entsprechendes computerlesbares Speichermedium

Publications (1)

Publication Number Publication Date
ES2704458T3 true ES2704458T3 (es) 2019-03-18

Family

ID=54011654

Family Applications (1)

Application Number Title Priority Date Filing Date
ES15182763T Active ES2704458T3 (es) 2014-09-03 2015-08-27 Procedimiento y disposición para registrar informaciones acústicas y ópticas, así como un programa informático correspondiente y un medio de memoria correspondiente legible por ordenador

Country Status (6)

Country Link
US (1) US9894435B2 (es)
EP (1) EP2993450B1 (es)
CN (1) CN105388478B (es)
DE (1) DE102014217598A1 (es)
DK (1) DK2993450T3 (es)
ES (1) ES2704458T3 (es)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105865788A (zh) * 2016-04-07 2016-08-17 成都铁安科技有限责任公司 一种用于列车轴承缺陷在线监测的阵列声学检测方法
FI129137B (en) * 2016-09-22 2021-08-13 Noiseless Acoustics Oy ACOUSTIC CAMERA AND METHOD FOR DETECTING ACOUSTIC EMISSIONS FROM VARIOUS LOCATIONS AND EQUIPMENT
US10820097B2 (en) 2016-09-29 2020-10-27 Dolby Laboratories Licensing Corporation Method, systems and apparatus for determining audio representation(s) of one or more audio sources
DE102016125225A1 (de) * 2016-12-21 2018-06-21 Hochschule für Angewandte Wissenschaften Hamburg Körperschaft des Öffentlichen Rechts Verfahren und Vorrichtung zur bildgebenden Darstellung von einem schallemittierenden Objekt
CN107063437A (zh) * 2017-04-12 2017-08-18 中广核研究院有限公司北京分公司 基于麦克风阵列的核电站噪声测试装置
EP3625525B1 (en) * 2017-05-16 2022-02-09 Signify Holding B.V. Noise-flow monitoring and sound localization via intelligent lighting
CN111971536A (zh) * 2018-03-28 2020-11-20 日本电产株式会社 声学解析装置及声学解析方法
HRP20220624T1 (hr) * 2018-04-06 2022-06-24 Leonardo S.P.A. Akustični sustav namijenjen detekciji i lociranju izvora zvuka niskog intenziteta i niske frekvencije i odgovarajući postupak lociranja
CN113196737B (zh) * 2019-01-09 2022-10-11 杭州他若定位科技有限公司 使用基于图像的对象跟踪进行定向声音捕获
CN110441737B (zh) * 2019-08-26 2023-02-24 上海声茵科技有限公司 一种采用鱼眼镜头的声源定位方法及其设备
CN110996197B (zh) * 2019-11-15 2021-05-28 歌尔股份有限公司 音频设备的控制方法、音频设备及存储介质
CN111522074B (zh) * 2020-05-29 2023-04-25 深圳市燕麦科技股份有限公司 麦克风检测设备及麦克风检测方法
JP7151910B2 (ja) * 2020-06-09 2022-10-12 東芝三菱電機産業システム株式会社 金属材加工設備の異音観測システム
CN112763054A (zh) * 2020-12-21 2021-05-07 上海工程技术大学 一种三维声场可视化系统和方法
CN112763058A (zh) * 2021-01-07 2021-05-07 国网河南省电力公司电力科学研究院 一种自定义坐标阵列噪声信号实时数据分析系统及方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3195920B2 (ja) * 1999-06-11 2001-08-06 科学技術振興事業団 音源同定・分離装置及びその方法
JP4722347B2 (ja) * 2000-10-02 2011-07-13 中部電力株式会社 音源探査システム
DE102005020193A1 (de) * 2005-04-28 2006-11-09 Volkswagen Ag Verfahren und Vorrichtungen zum Eliminieren von Schallsignalanteilen aus Mikrofonsignalen eines Gesamtschallsignals und zum Orten von Schallquellen
DE102008026657A1 (de) * 2008-03-10 2009-09-24 Head Acoustics Gmbh Verfahren und Vorrichtung zur bildgebenden Darstellung von akustischen Objekten
FR2938058B1 (fr) * 2008-11-03 2010-11-26 Microdb Dispositif de mesure et de representation des sources de bruit a l'interieur d'un espace
US8761412B2 (en) * 2010-12-16 2014-06-24 Sony Computer Entertainment Inc. Microphone array steering with image-based source location
JP2012186594A (ja) * 2011-03-04 2012-09-27 Sony Corp 音響装置、音響調整方法およびプログラム

Also Published As

Publication number Publication date
US20160066086A1 (en) 2016-03-03
CN105388478A (zh) 2016-03-09
EP2993450B1 (de) 2018-10-10
CN105388478B (zh) 2019-10-18
EP2993450A3 (de) 2016-12-21
DE102014217598A1 (de) 2016-03-03
EP2993450A2 (de) 2016-03-09
US9894435B2 (en) 2018-02-13
DK2993450T3 (en) 2019-01-28

Similar Documents

Publication Publication Date Title
ES2704458T3 (es) Procedimiento y disposición para registrar informaciones acústicas y ópticas, así como un programa informático correspondiente y un medio de memoria correspondiente legible por ordenador
US9188430B2 (en) Compensation of a structured light scanner that is tracked in six degrees-of-freedom
JP6423848B2 (ja) 対象物の３次元座標を決定するための方法
ES2798798T3 (es) Procedimiento y aparato para obtener imágenes de determinación de distancia con un UAV, y UAV
JP5123932B2 (ja) 回動鏡を備えるカメラ利用６自由度標的計測装置及び標的追尾装置
JP5127820B2 (ja) カメラ利用標的座標計測方法
JP5615416B2 (ja) レーザトラッカによる寸法データの自動計測
US10380749B2 (en) Device and method for indoor mobile mapping of an environment
CN101821578B (zh) 非接触式测量装置和方法
ES2326035T3 (es) Procedimiento optico de determinacion de una dimension o la orientacion de un objeto movil.
US20140259714A1 (en) System and method of acquiring three dimensional coordinates using multiple coordinate measurement devices
JP7300948B2 (ja) 測量データ処理装置、測量データ処理方法、測量データ処理用プログラム
ES2763912T3 (es) Seguimiento óptico
JP2006258486A (ja) 座標計測装置と座標計測方法
BR112015013804B1 (pt) sistema de medição para medição tridimensional de uma estrutura submarina, método para a triangulação a laser de uma estrutura submarina e meio legível por computador não transitório codificado com instruções
US20130271573A1 (en) Method and apparatus for determining the 3d coordinates of an object
US20160153773A1 (en) Registering of a scene disintegrating into clusters with position tracking
JP2016080572A (ja) レーザ計測システム
JP2019053003A (ja) データ処理装置、データ処理方法およびデータ処理用プログラム
JP2008241643A (ja) ３次元形状測定装置
CN104976968A (zh) 一种基于led标签跟踪的三维几何测量方法及系统
JP2004163271A (ja) 非接触画像計測装置
JP2007093412A (ja) ３次元形状測定装置
CN114549660B (zh) 基于圆柱形自识别标记物的多相机标定方法、装置及设备
JP5087571B2 (ja) 三次元像表示装置の座標校正方法