ES2699501T3 - Procedimiento para utilizar un dispositivo de procesamiento para datos de sensor de un sensor situado en un vehículo y vehículo - Google Patents

Procedimiento para utilizar un dispositivo de procesamiento para datos de sensor de un sensor situado en un vehículo y vehículo Download PDF

Info

Publication number
ES2699501T3
ES2699501T3 ES17172191T ES17172191T ES2699501T3 ES 2699501 T3 ES2699501 T3 ES 2699501T3 ES 17172191 T ES17172191 T ES 17172191T ES 17172191 T ES17172191 T ES 17172191T ES 2699501 T3 ES2699501 T3 ES 2699501T3
Authority
ES
Spain
Prior art keywords
vehicle
movement
information
sensor
describes
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
ES17172191T
Other languages
English (en)
Inventor
Daniel Wingert
Matthias Roland Schmid
Rüdiger Borsdorf
Michael Bauer
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Audi AG
Original Assignee
Audi AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Audi AG filed Critical Audi AG
Application granted granted Critical
Publication of ES2699501T3 publication Critical patent/ES2699501T3/es
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/04Traffic conditions
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/66Radar-tracking systems; Analogous systems
    • G01S13/72Radar-tracking systems; Analogous systems for two-dimensional tracking, e.g. combination of angle and range tracking, track-while-scan radar
    • G01S13/723Radar-tracking systems; Analogous systems for two-dimensional tracking, e.g. combination of angle and range tracking, track-while-scan radar by using numerical data
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/42Simultaneous measurement of distance and other co-ordinates
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/50Systems of measurement based on relative movement of target
    • G01S17/58Velocity or trajectory determination systems; Sense-of-movement determination systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/4802Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/4808Evaluating distance, position or velocity data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7847Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content
    • G06F16/7854Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content using shape
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/24Aligning, centring, orientation detection or correction of the image
    • G06V10/242Aligning, centring, orientation detection or correction of the image by image rotation, e.g. by 90 degrees
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/02Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
    • G01S13/50Systems of measurement based on relative movement of target
    • G01S13/58Velocity or trajectory determination systems; Sense-of-movement determination systems
    • G01S13/589Velocity or trajectory determination systems; Sense-of-movement determination systems measuring the velocity vector
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G01S13/865Combination of radar systems with lidar systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G01S13/867Combination of radar systems with cameras
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/66Tracking systems using electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9323Alternative operation using light waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9327Sensor installation details
    • G01S2013/93271Sensor installation details in the front of the vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Electromagnetism (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Mathematical Physics (AREA)
  • Automation & Control Theory (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

Procedimiento para utilizar un dispositivo de procesamiento (6) para datos de sensor como mínimo de un sensor (5) instalado en un vehículo (1) el cual capta objetos en el entorno del vehículo (1) y sus datos de sensor describen puntos de objeto (8) con una información de distancia, en donde a partir de los datos de sensor el dispositivo de procesamiento (6) calcula objetos y sigue el movimiento de un objeto clasificado como vehículo (3), en donde el seguimiento del objeto se realiza mediante un modelo dinámico el cual utiliza una información de movimiento que describe el movimiento del objeto en dos direcciones de coordenadas, caracterizado por que al cumplirse un criterio de asignación utilizado a partir de una información de movimiento y/o de una información de geometría que describe la extensión geométrica del objeto, en el marco del modelo dinámico utiliza adicionalmente una información de orientación la cual comprende una Bounding Box (14) con una orientación que describe el ángulo de giro del vehículo (3).

Description

DESCRIPCIÓN
Procedimiento para utilizar un dispositivo de procesamiento para datos de sensor de un sensor situado en un vehículo y vehículo
El invento se refiere a un procedimiento para utilizar un dispositivo de procesamiento para datos de sensor de como mínimo un sensor instalado en un vehículo, sensor que capta objetos situados en el entorno del vehículo y cuyos datos de sensor describen puntos objeto con una información de distancia, en donde a partir de los datos de sensor el dispositivo de procesamiento calcula objetos y sigue el movimiento de un objeto clasificado como vehículo, produciéndose el seguimiento del objeto mediante un modelo dinámico el cual utiliza una información de movimiento que describe el movimiento del objeto en dos direcciones de coordenadas .
En la generación de modelos de entorno de un automóvil se utilizan cada vez más sensores que no solo representan en dos dimensiones, como por ejemplo cámaras, sino que los puntos objeto captados los asocian adicionalmente a una información de distancia o de profundidad. Ya se conoce el mediante un dispositivo de procesamiento, procesar nuevamente los datos de sensor presentados por el sensor, en donde mediante extracción de características de los puntos objeto, (lógicos) se calculan objetos. Para seguir utilizando estos datos, por ejemplo para sistemas de asistencia al conductor, es además necesario que se produzca un seguimiento del movimiento de este objeto (el llamado “tracking”) a lo largo de varios ciclos de medida del sensor. Además se conoce el aplicar un modelo dinámico en el que se describe el movimiento del objeto en dos direcciones de coordenadas, por ejemplo por medio de un vector de estado que presenta una componente x y una componente y de la velocidad de movimiento.
Sin embargo es una desventaja el que un modelo dinámico como este no presenta ninguna información sobre la orientación, es decir el ángulo de giro del vehículo (real) representado por el objeto. En tanto que las informaciones adquiridas sobre el objeto solo deben ser utilizadas para el sistema de asistencia al conductor, en el cual solo se considera el tráfico en dirección transversal o longitudinal, se puede determinar la orientación de un vehículo bajo la aceptación adicional de que el tráfico solo se presenta desde una de las direcciones antes mencionadas. En sistemas de asistencia al conductor más complejos, por ejemplo en aquellos en que deben apoyar al conductor en cruces de calles, estas suposiciones adicionales no se pueden tomar claramente de manera que pueden aparecer movimientos aparentes del objeto o se interrumpe el seguimiento del vehículo. El articulo “ Simultaneous Tracking and Shape Estimation with Lasers Scanners” (aparecido en Intelligent vehicles Symposium Proceedings 2014, IEEE, pp. 1205 - 1210, 2014) publica el preámbulo de la reivindicación 1.
Frente a esto, el invento tiene consigo como base la misión de presentar un procedimiento más fiable del tipo mencionado al comienzo el cual especialmente en situaciones de tráfico longitudinal y transversal haga posible un seguimiento más robusto de los objetos.
Esta misión será resuelta por un procedimiento del tipo mencionado al comienzo en el que de acuerde con el invento está previsto que al cumplirse un criterio de asignación utilizado a partir de una información de movimiento y/o de una información de geometría que describe la extensión geométrica del objeto, en el marco del modelo dinámico utiliza adicionalmente una información de orientación la cual comprende una Bounding Box con una orientación que describe el ángulo de giro del vehículo.
El invento se refiere a la reflexión de que el modelo dinámico habitualmente utilizado, el cual emplea una información de movimiento que describe el movimiento del objeto en dos direcciones de coordenadas, para completar la información de orientación permite una predicción suficientemente exacta sobre la orientación real del vehículo representado por el objeto. Solo entonces se calcula la Bounding Box, o sea una envolvente especialmente rectangular que limita a todo el objeto y será provista con la orientación referida al ángulo de giro del vehículo. Con otras palabras, la información de orientación permite una predicción sobre qué lado longitudinal o qué lado transversal del vehículo corresponde a qué lado de la Bounding Box.
El procedimiento acorde con el invento consigue la ventaja de que se pueden solucionar ambigüedades de orientación que de manera típica comprenden cuatro orientaciones posibles del vehículo en el interior de la Bounding Box. Así, por ejemplo, se puede encontrar el problema de que en un ciclo de medida el sensor detecta el lado frontal y el lado del conductor, y en el siguiente ciclo de medida detecta el lado frontal y el lado del acompañante, con lo que durante el seguimiento se deduce un movimiento aparente indeseado del objeto. Mediante el procedimiento acorde con el invento se preparan informaciones fiables sobre el movimiento del objeto que especialmente pueden ser utilizadas para sistemas de asistencia al conductor en forma de los llamados asistentes de cruce.
Para ello, mediante el sensor se detectan primeramente los objetos en el entorno del vehículo, que especialmente mediante la utilización de procedimientos de tiempos de marcha calcula la información de distancia que reúne también la información de profundidad. Entonces, a partir de los datos de sensor, el dispositivo de procesamiento calcula objetos, los clasifica como vehículos por ejemplo a partir de los algoritmos de clasificación conocidos por el estado de la técnica y lleva a cabo el seguimiento o el “tracking de esos objetos. El modelo dinámico utilizado para ello describe el movimiento del vehículo hasta completar el criterio de adjudicación solo mediante la información de movimiento, o sea en dos direcciones de coordenadas. Es adecuado para ello el utilizar un sistema euclideo de coordenadas cuya dirección de coordenadas x corresponde típicamente con el eje transversal del vehículo y cuya dirección de coordenadas y corresponde con el eje longitudinal del vehículo. Con ello el seguimiento del objeto se realiza hasta completar el criterio de adjudicación independientemente de la orientación del objeto. En otras palabras, las típicas cuatro orientaciones posibles del vehículo representado por el objeto, son tratadas con igual valor.
El procedimiento acorde con el invento se destaca ahora por que el dispositivo de procesamiento valora ahora el criterio de asignación que según una primera alternativa del invento será utilizado sobre la información de movimiento. En este caso, preferiblemente sobre la base de datos de sensor de varios ciclos de medida del sensor, se comprobara si es posible asociar una posible orientación del vehículo, o sea de su ángulo de giro, con la dirección de movimiento del objeto calculada. Con preferencia, la información de movimiento describe la velocidad del objeto descompuesta en dos direcciones, especialmente en dirección x y en dirección y. De acuerdo con esto, el ángulo de giro del vehículo se definirá adecuadamente como el desplazamiento angular del eje longitudinal del vehículo o del eje transversal del vehículo hacia una dirección de coordenadas. Según una segunda alternativa del invento, que sin embargo también puede ser empleada en combinación con la anteriormente descrita, en el marco del criterio de asignación se comprobara si la extensión geométrica del objeto, o sea especialmente la disposición geométrica de los puntos de objeto permite una conclusión suficientemente exacta sobre la orientación del vehículo.
En ambas alternativas del invento al cumplirse los criterio de asignación se genera la Bounding Box para el objeto y a este se le asigna una orientación correspondiente con la orientación del vehículo. Casi se conmuta a un modelo dinámico ampliado que junto con la información de movimiento habitual utiliza adicionalmente la información de orientación y con ello hace posible una clara resolución de las ambigüedades de orientación durante el seguimiento.
Es especialmente ventajoso si, de varias orientaciones posibles, a la Bounding Box se le asignan aquellas para las que la desviación de su ángulo de orientación respecto de la dirección de movimiento del objeto es mínima. Con ello se pueden considerar varios ángulos de orientación 9 de la Bounding Box, asignándose aquel ángulo de orientación que presente la menor desviación respecto de la dirección de movimiento calculada a partir de la información de movimiento. Si entonces la información de movimiento comprende la velocidad del objeto en dirección x y en dirección y entonces se le asignara aquel ángulo de orientación 9 para el que
|atan2(vy, v % ) — q)
sea mínima, en donde Ox y Oy describen las velocidades del objeto en dirección x y en dirección y, y atan2 describe un operador de arco tangente que presenta dos argumentos.
Además en el marco del procedimiento acorde con el invento se prefiere cuando el criterio de asignación utilizado sobre la información de movimiento describe el que se ha alcanzado un nivel umbral mediante una medida de una inseguridad angular de la dirección de movimiento del objeto. La medida de la inseguridad angular describe la exactitud de la estimación de la dirección de movimiento del objeto mediante el dispositivo de procesamiento. Es aconsejable que se elija el valor umbral de manera que se pueda admitir una seguridad suficiente de la dirección de movimiento para la utilización prevista del procedimiento. Puesto que los algoritmos de tracking utilizados para el seguimiento de objetos, como por ejemplo los filtros Kalman, calculan sin más una medida de este tipo o como minimo parámetros a partir de los cuales se puede deducir fácilmente la medida, puede conseguirse una valoración especialmente sencilla del criterio de asignación.
Es de especial ventaja si la medida de la inseguridad angular es calculada dependiendo de la varianza como mínimo de una velocidad en una dirección de coordenadas y/o de la covarianza de las velocidades en las direcciones de coordenadas. La varianza y la covarianza son por tanto parámetros que pueden presentarse cuando se utiliza el algoritmo de tracking, puesto que sirven para el cálculo estadístico de la dirección de movimiento del objeto seguido. Una medida calculada de esta manera para la inseguridad angular puede ser representada como sigue
Figure imgf000003_0001
Aquí los operadores describen Var la varianza y Covar la covarianza.
En el procedimiento acorde con el invento es especialmente adecuado si el dispositivo de procesamiento para la determinación del objeto reúne varios puntos de objeto en un segmento limitado por un tramo o varios tramos y calcula un punto de referencia. Los procedimientos de segmentación utilizados para ello son propiamente conocidos por el estado de la técnica y a partir de una cantidad de puntos de objeto se calculan los segmentos que están relacionados. Si el sensor está orientado solamente a un lado del objeto el sensor capta esencialmente los puntos de objeto situados en una línea que son reunidos en un segmento (forma I) que presenta un tramo. Cuando por el contrario, al sensor están orientados como mínimo dos lados del objeto se capta una cantidad de puntos de objeto que presenta un recorrido de forma de esquina. A partir de esto se puede formar el segmento (forma L) que presenta dos tramos. Los límites de un segmento son entonces la base para la definición de la Bounding Box (completa) de manera que el segmento puede ser incluido también como Bounding Box parcial.
El punto de referencia forma por tanto el punto de enlace para determinar la posición del objeto, en donde ésta se calcula aconsejablemente como punto final del tramo o como punto de corte de dos tramos del segmento. El seguimiento del movimiento del objeto puede realizarse entonces de manera ventajosa sobre la base del punto de referencia. Además es especialmente aconsejable si el punto de referencia describe una posición de esquina del vehículo. Esto hace posible una asociación especialmente sencilla del objeto que hay que calcular con el vehículo captado.
El criterio de asignación utilizado sobre la información de geometría puede describir que se ha alcanzado un nivel umbral para una relación de dos longitudes de tramo. Preferentemente, se utilizan para ello los tramos limitados por el punto de referencia. Sobre la base de la hipótesis de que el frente y la parte trasera de un vehículo son esencialmente más cortos que sus lados longitudinales, de esta forma se puede determinar una conclusión especialmente sencilla de la orientación del vehículo y la información de orientación dependiendo también de esta relación.
En el procedimiento acorde con el invento se prefiere además si dependiendo de la información de orientación y de una hipótesis de geometría el tamaño de la Bounding Box se ajusta al vehículo. Durante o después del cálculo de la Bounding Box y de la confirmación de la orientación del vehículo, sobre la base de la hipótesis de geometría que por ejemplo afirma que el lado longitudinal del vehículo es mayor en un factor predeterminado que el lado transversal, puede conseguirse una corrección del tamaño de la Bounding Box. Esto es especialmente aconsejable cuando se utiliza el criterio de asignación aplicado a la información de movimiento puesto que un tamaño de la Bounding Box calculado en primer lugar sobre la base de puntos de objeto captados solo fragmentariamente, puede desviarse del tamaño real del vehículo captado. Sin embargo, si se conoce la dirección del objeto puede determinarse fácilmente la longitud del lado longitudinal del vehículo sobre la base de una longitud calculada del lado transversal, y a la inversa.
Como ya se ha expuesto, los datos de partida del dispositivo de procesamiento pueden servir como datos de entrada del sistema de asistencia al conductor Por lo tanto se prefiere si el dispositivo de procesamiento prepara un sistema de vehículo que a partir del seguimiento de las informaciones de objeto adquiridas valore los movimientos de vehículos en dirección transversal y dirección longitudinal. El sistema de vehículo puede ser especialmente un sistema de asistencia al conductor que valore situaciones de tráfico en un cruce de calles (el llamado asistente de cruce). Aquí, los datos de objeto pueden ser enviados inmediatamente al sistema de vehículo o en primer lugar ser fusionados con los datos de partida de otro dispositivo de sensor del vehículo para un modelo de entorno y entonces ser preparados para el sistema de vehículo.
Finalmente en el procedimiento acorde con el invento se prefiere especialmente si como sensor se utiliza un escáner laser y/o una cámara Time-of-Flight y/o un sensor de radar. Estos tipos de sensores se basan todos en la valoración del tiempo de marcha de las ondas electromagnéticas enviadas y son extraordinariamente adecuados para la captación de los puntos de objeto resueltos en profundidad.
Además el invento se refiere a un vehículo que comprende un sensor montado en él para la detección de objetos en el entorno del vehículo y para la preparación de datos de sensor que describen puntos de objeto que presentan una información de distancia así como a un dispositivo de procesamiento para los datos de sensor, el cual será hecho funcionar según el procedimiento acorde con el invento. Todas las realizaciones para procedimientos acordes con el invento pueden ser transmitidas análogamente al vehículo acorde con el invento, de manera que también con éste se pueden obtener las ventajas anteriormente mencionadas.
Otras ventajas y detalles del invento se desprenden de los ejemplos de realización descritos a continuación así como sobre la base de los dibujos. Estos son representaciones esquemáticas y muestran:
Fig. 1 un esquema de principio de un vehículo acorde con el invento en una situación de tráfico a modo de ejemplo,
Fig. 2 una representación de varias posibles orientaciones de una Bounding Box,
Fig. 3. una representación del cálculo de la orientación real de la Bounding Box, y
Fig. 4 una representación de la adaptación del tamaño de la Bounding Box.
La figura 1 muestra un esquema de principio de un vehículo 1 acorde con el invento en una situación de tráfico a modo de ejemplo, Se encuentra en un cruce de calles 2 que acaba de ser pasado por un vehículo 3 que circula transversalmente.
El vehículo 1 presenta un dispositivo de sensor 4 con varios sensores en donde por motivos de claridad solo esta mostrado un sensor 5 situado en la zona frontal del vehículo. El sensor 5 está diseñado para detectar objetos en el entorno del vehículo, en donde sus datos de sensor describen puntos de objeto con una información de distancia. Por tanto, el sensor 5 puede estar diseñado, por ejemplo, como un escáner laser, cámara Time-of-Light o como sensor de radar. Los restantes sensores del dispositivo de sensor 4 pueden estar situados en otras posiciones de montaje del vehículo 1 y/o y pueden ser realizados mediante diferentes tipos de sensor mencionados anteriormente. Los datos de sensor son preparados en un dispositivo de procesamiento 6. Éste genera informaciones de objeto que representan objetos que describen objetos en el entorno del vehículo 1, por ejemplo, el vehículo 3. Las informaciones de objeto son valoradas por un sistema de vehículo 7 en forma de un sistema de asistencia al conductor, por ejemplo un llamado asistente al cruce, que valora los movimientos de vehículos en el entorno del vehículo 1. El dispositivo de procesamiento 6 puede ser operado según un procedimiento que a continuación será descrito con más detalle sobre la base de la situación del tráfico.
Como se puede apreciar en la figura 1, el sensor 5 detecta al vehículo 3 en la zona de su parte trasera y de su lado del acompañante, generándose datos de sensor que describen puntos de objeto 8. Éstos son presentados al dispositivo de procesamiento 6 el cual mediante un algoritmo de segmentación reúne los puntos de objeto 8 en un segmento 11 (forma de L) limitado por dos tramos 9, 10, el cual también puede ser acogido como Bounding Box parcial. Además, al dispositivo de procesamiento 6 calcula el punto de corte de los tramos 9, 10 como punto de referencia 12 para al siguiente seguimiento del movimiento de un objeto que representa al vehículo 3. Con ello el dispositivo de procesamiento 6 realiza un correspondiente algoritmo de clasificación que clasifica como tal al vehículo 3 captado inicialmente solo como objeto.
El dispositivo de procesamiento 6 sigue al objeto a lo largo de otros ciclos de medida del sensor 5 utilizando un modelo dinámico el cual utiliza una información de movimiento que describe el movimiento del objeto en dos direcciones de coordenadas x, y. El seguimiento se realiza por tanto independientemente de la orientación real del vehículo 3, o sea, de su ángulo de giro referido a una de las direcciones de coordenadas x. y. Con otras palabras, se tratan con igual valor cuatro posibles orientaciones 13a-13d del vehículo 3 mostradas en la figura 2. Durante toda la duración del movimiento del vehículo 3 esto sería sin embargo una desventaja puesto que una eventual detección errónea de otra posición de esquina del vehículo 3 como punto de referencia 12 en un posterior ciclo de medida tendría como resultado un movimiento aparente del objeto o simplemente podría llevar a una rotura del seguimiento. Para solventar esta problemática cuando se complete un criterio de asignación en el marco del modelo dinámico se utilizará adicionalmente una información de orientación la cual comprende una Bandung Box 14 (completa) (véase la figura 4) con una orientación que describe el ángulo de giro del vehículo 3. Con ello, de varias orientaciones posibles, correspondientes con las orientaciones 13a - 13d, la Bounding Box 14 será asignada a aquella para la que la desviación de su ángulo de orientación 9 de la dirección de movimiento del objeto sea mínima. Por ello, la información de movimiento describe la velocidad del objeto mediante componentes de velocidad en dirección x y en dirección y, de manera que se asignará aquel ángulo de orientación 9 para el que
Figure imgf000005_0001
es minimo, en donde Ux y Uy describen las velocidades del objeto en dirección x y en dirección y y atan2 describe un operador de arco tangente que presenta dos argumentos.
Esta asignación, con otras palabras una conmutación del modelo dinámico, se consigue sin embargo solo cuando se ha completado un criterio de asignación, es decir, tan pronto como se puede determinar la orientación con suficiente seguridad. Por ello el criterio de asignación se aplica sobre la información de movimiento y describe el haberse alcanzado un valor umbral mediante una medida de una inseguridad de ángulo de la dirección de movimiento del objeto. El dispositivo de procesamiento 6 calcula esta medida mediante la siguiente formula: En ella los operadores describen Var la varianza y Covar la covarianza. Los correspondientes valores para las varianzas y la covarianza se calculan utilizando un filtro Kalman en el marco del seguimiento del objeto.
La figura 3 muestra nuevamente el cálculo de la orientación real de la Bounding Box 14, en donde ella representa el desplazamiento del segmento 11 hacia una posición 15 durante un posterior ciclo de medida del sensor 5. La flecha 16 representa la dirección de movimiento del objeto en forma de un vector de velocidad, el cual será calculado durante la realización del algoritmo de seguimiento que utiliza el filtro Kalman. Apreciablemente, la flecha 16 no apunta a lo largo del eje longitudinal de vehículo 3. Este desplazamiento demuestra que el vector de velocidad no puede ser calculado exactamente por el algoritmo de seguimiento, sino que existe una cierta inseguridad de ángulo. Solo cuando su medida en el marco del criterio de asignación es valorada como suficientemente pequeña se produce la utilización adicional de la información de orientación en el marco del modelo dinámico.
En la figura 4 se puede apreciar además que el tamaño de la Bounding Box 14 de un rectángulo obtenido teóricamente por haberse completado los tramos 9, 10 del segmento 11, no representa ninguna envolvente correcta del vehículo 3. De acuerdo con esto, sigue una adaptación de su tamaño con el que se seguirá utilizando la Bounding Box 14. La adaptación del tamaño se realiza dependiendo de la información de orientación y de una hipótesis de geometría para el vehículo 3, la cual describe una relación admisible de la longitud del lado transversal de un vehículo con la longitud de su lado longitudinal. Después de que debido a la información de orientación se conoce que el punto de referencia 12 describe la posición de esquina del lado del acompañante en la parte trasera del vehículo 3, se determinan las longitudes laterales de la Bounding Box 14 de acuerdo con la longitud del tramo 10 y un múltiplo de la longitud del tramo 10 descrito por la hipótesis de geometría determinado como longitud ajustada del tramo 9.
El procedimiento antes descrito puede ser utilizado fundamentalmente también si a partir de los datos de sensor se calcula un segmento 11 (forma de I) que presenta solamente un tramo, o sea, cuando el sensor 5 detecta solamente puntos de objeto 8 de un lado longitudinal o de un lado transversal del vehículo 3. También en este caso se puede calcular un correspondiente punto de referencia 12 como punto final del tramo, con lo que dependiendo de la información de movimiento se consiguen un cálculo de una Bounding Box 14 con asignación de la orientación y un ajuste del tamaño de la Bounding Box 14.
Según otro ejemplo de realización del procedimiento que también puede ser combinado con el ejemplo de partida anteriormente descrito, el criterio de asignación es utilizado sobre una información de geometría que describe la extensión geométrica del objeto. Esto es especialmente aconsejable cuando después de uno o típicamente varios ciclos de medida del sensor 5 se pueden determinar de manera suficientemente exacta las longitudes de los lados del vehículo 3, de manera que, utilizando otra vez una hipótesis de geometría para la relación de estas longitudes de los lados se puede deducir una predicción sobre la orientación del vehículo 3. La asignación del ángulo de orientación 9 se produce de manera análoga a la del ejemplo de realización anteriormente descrito teniendo en cuenta la información de movimiento.

Claims (12)

REIVINDICACIONES
1. Procedimiento para utilizar un dispositivo de procesamiento (6) para datos de sensor como mínimo de un sensor (5) instalado en un vehículo (1) el cual capta objetos en el entorno del vehículo (1) y sus datos de sensor describen puntos de objeto (8) con una información de distancia, en donde a partir de los datos de sensor el dispositivo de procesamiento (6) calcula objetos y sigue el movimiento de un objeto clasificado como vehículo (3), en donde el seguimiento del objeto se realiza mediante un modelo dinámico el cual utiliza una información de movimiento que describe el movimiento del objeto en dos direcciones de coordenadas, caracterizado por que al cumplirse un criterio de asignación utilizado a partir de una información de movimiento y/o de una información de geometría que describe la extensión geométrica del objeto, en el marco del modelo dinámico utiliza adicionalmente una información de orientación la cual comprende una Bounding Box (14) con una orientación que describe el ángulo de giro del vehículo (3).
2. Procedimiento según la reivindicación 1, caracterizado por que de varias orientaciones posibles, a la Bounding Box (14) se le asigna aquella para la que la desviación de su ángulo de orientación (a) respecto de la dirección de movimiento del objeto es mínima.
3. Procedimiento según la reivindicación 1 o 2, caracterizado por que el criterio de asignación utilizado sobre la información de movimiento describe haberse alcanzado un valor umbral mediante una medida de una inseguridad de ángulo de la dirección de movimiento del objeto.
4. Procedimiento según la reivindicación 3, caracterizado por que la medida de la inseguridad de ángulo se calcula dependiendo de la varianza de como mínimo una velocidad en una dirección de coordenadas y/o de la covarianza de velocidades en las direcciones de coordenadas.
5. Procedimiento según una de las reivindicaciones precedentes, caracterizado por que para determinar el objeto el dispositivo de procesamiento (6) reúne varios puntos de objeto (8) en un segmento (11 ) limitado por un tramo o varios tramos (9, 10) y calcula un punto de referencia (12) especialmente como punto final del tramo o como punto de cruce de dos tramos (9, 10) del segmento (11).
6. Procedimiento según la reivindicación 5, caracterizado por que el criterio de asignación utilizado sobre la información de geometría describe haberse alcanzado un valor umbral para una relación de dos longitudes de tramo.
7. Procedimiento según la reivindicación 5 o 6, caracterizado por que el seguimiento del movimiento del objeto se realiza sobre la base del punto de referencia (12 ).
8. Procedimiento según una de las reivindicaciones 5 a 7, caracterizado por que el punto de referencia describe una posición de esquina del vehículo (3).
9. Procedimiento según una de las reivindicaciones precedentes, caracterizado por que el tamaño de la Bounding Box (14) se adapta dependiendo de la información de orientación y de una hipótesis de geometría para el vehículo (3).
10. Procedimiento según una de las reivindicaciones precedentes, caracterizado por que a partir de las informaciones de objeto obtenidas del seguimiento el dispositivo de procesamiento (6) prepara un sistema de vehículo (7) que valora movimientos de vehículos (3) en dirección transversal y en dirección longitudinal.
11. Procedimiento según una de las reivindicaciones precedentes, caracterizado por que como sensor (5) se utiliza un escáner laser y/o una cámara Time-of-Flight y/o un sensor de radar.
12. Vehículo que comprende un sensor (5) montado en él para detectar objetos en el entorno del vehículo (1) y para preparar datos de sensor que describen puntos de objeto (8) que presentan una información de distancia, así como un dispositivo de procesamiento (6) para los datos de sensor, el cual está diseñado para realizar un procedimiento acorde con las reivindicaciones 1 - 11.
ES17172191T 2016-05-24 2017-05-22 Procedimiento para utilizar un dispositivo de procesamiento para datos de sensor de un sensor situado en un vehículo y vehículo Active ES2699501T3 (es)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102016006381.5A DE102016006381B3 (de) 2016-05-24 2016-05-24 Verfahren zum Betreiben einer Verarbeitungseinrichtung für Sensordaten eines in einem Kraftfahrzeug angeordneten Sensors und Kraftfahrzeug

Publications (1)

Publication Number Publication Date
ES2699501T3 true ES2699501T3 (es) 2019-02-11

Family

ID=58765730

Family Applications (1)

Application Number Title Priority Date Filing Date
ES17172191T Active ES2699501T3 (es) 2016-05-24 2017-05-22 Procedimiento para utilizar un dispositivo de procesamiento para datos de sensor de un sensor situado en un vehículo y vehículo

Country Status (3)

Country Link
EP (1) EP3248852B1 (es)
DE (1) DE102016006381B3 (es)
ES (1) ES2699501T3 (es)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102019102769A1 (de) * 2019-02-05 2020-08-06 Bayerische Motoren Werke Aktiengesellschaft Verfahren und eine Vorrichtung zur Sensordatenfusion für ein Fahrzeug

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009042181A (ja) * 2007-08-10 2009-02-26 Denso Corp 推定装置
DE102008055932A1 (de) * 2008-11-05 2010-05-06 Iav Gmbh Ingenieurgesellschaft Auto Und Verkehr Verfahren zur modellbasierten Simulation eines Verhaltens eines Sensors
DE102014210068A1 (de) * 2014-05-27 2015-12-03 Volkswagen Aktiengesellschaft Verfahren zum Generieren eines Umfeldmodells eines Kraftfahrzeugs, Umfeldmodell und Fahrassistenzsystem

Also Published As

Publication number Publication date
EP3248852B1 (de) 2018-10-24
EP3248852A1 (de) 2017-11-29
DE102016006381B3 (de) 2017-10-26

Similar Documents

Publication Publication Date Title
US10605896B2 (en) Radar-installation-angle calculating device, radar apparatus, and radar-installation-angle calculating method
Rose et al. An integrated vehicle navigation system utilizing lane-detection and lateral position estimation systems in difficult environments for GPS
US20030210807A1 (en) Monitoring device, monitoring method and program for monitoring
JP2022113746A (ja) 判定装置
US20220169280A1 (en) Method and Device for Multi-Sensor Data Fusion For Automated and Autonomous Vehicles
JP6396714B2 (ja) 物体認識装置
JP6520740B2 (ja) 物体検出方法、物体検出装置、およびプログラム
KR102086270B1 (ko) 주행 제어 장치의 제어 방법 및 주행 제어 장치
JP6450294B2 (ja) 物体検出装置、物体検出方法、及びプログラム
KR102056147B1 (ko) 자율주행차량을 위한 거리 데이터와 3차원 스캔 데이터의 정합 방법 및 그 장치
JP2018092483A (ja) 物体認識装置
JP2010134878A (ja) 立体物出現検知装置
BR102017027745A2 (pt) aparelho de assistência à condução
CN108475471B (zh) 车辆判定装置、车辆判定方法和计算机可读的记录介质
CN111492258A (zh) 用于确定车辆所行驶的道路与测量或雷达传感器的检测方向之间的安装角度的方法和装置
JP2017078607A (ja) 車両位置推定装置及びプログラム
KR20180114158A (ko) 센서, 제어 장치, 운전자 보조 시스템, 및 자동차를 사용하는 간접 측정에 의해 자동차 주위에서 하나 이상의 물체의 검출을 향상시키는 방법
ES2699501T3 (es) Procedimiento para utilizar un dispositivo de procesamiento para datos de sensor de un sensor situado en un vehículo y vehículo
EP3618027B1 (en) Object identification device, road-side device and object identification method
US20220205804A1 (en) Vehicle localisation
JP2018032253A (ja) キャリブレーション装置、キャリブレーション方法、キャリブレーションプログラム
CN109195849B (zh) 摄像装置
JP2007233440A (ja) 車載用画像処理装置
WO2020230314A1 (ja) 自己位置補正方法及び自己位置補正装置
JP2012014520A (ja) 障害物検出装置