ES2956878T3 - Aparato y procedimiento de análisis de roturas - Google Patents

Aparato y procedimiento de análisis de roturas Download PDF

Info

Publication number
ES2956878T3
ES2956878T3 ES20201944T ES20201944T ES2956878T3 ES 2956878 T3 ES2956878 T3 ES 2956878T3 ES 20201944 T ES20201944 T ES 20201944T ES 20201944 T ES20201944 T ES 20201944T ES 2956878 T3 ES2956878 T3 ES 2956878T3
Authority
ES
Spain
Prior art keywords
computing device
image
break
mobile computing
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
ES20201944T
Other languages
English (en)
Inventor
Mark Hansen
Ian Hales
Abdul Farooq
Melvyn Smith
Gwen Daniel
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Belron International Ltd
Original Assignee
Belron International Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Belron International Ltd filed Critical Belron International Ltd
Application granted granted Critical
Publication of ES2956878T3 publication Critical patent/ES2956878T3/es
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/958Inspecting transparent materials or objects, e.g. windscreens
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/10Complex mathematical operations
    • G06F17/14Fourier, Walsh or analogous domain transformations, e.g. Laplace, Hilbert, Karhunen-Loeve, transforms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/62Analysis of geometric attributes of area, perimeter, diameter or volume
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/66Analysis of geometric attributes of image moments or centre of gravity
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/8851Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
    • G01N2021/8887Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/958Inspecting transparent materials or objects, e.g. windscreens
    • G01N2021/9586Windscreens
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20036Morphological image processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20048Transform domain processing
    • G06T2207/20056Discrete and fast Fourier transform, [DFT, FFT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20092Interactive image processing based on input by user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30164Workpiece; Machine component

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Quality & Reliability (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Geometry (AREA)
  • Mathematical Physics (AREA)
  • Mathematical Optimization (AREA)
  • Computational Mathematics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Mathematical Analysis (AREA)
  • Algebra (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Processing (AREA)
  • Vehicle Cleaning, Maintenance, Repair, Refitting, And Outriggers (AREA)
  • Preparing Plates And Mask In Photomechanical Process (AREA)
  • Image Analysis (AREA)
  • Debugging And Monitoring (AREA)
  • Investigating Or Analysing Biological Materials (AREA)
  • Processing Of Solid Wastes (AREA)
  • Organic Low-Molecular-Weight Compounds And Preparation Thereof (AREA)

Abstract

Se divulgan un método y un aparato que permiten el análisis de una rotura en un panel de acristalamiento de un vehículo sin la asistencia de un técnico, el método y el aparato utilizan la captura de una imagen de la rotura y el procesamiento de la imagen de la rotura para permitir la idoneidad para la reparación o sustitución del panel de acristalamiento por determinar. (Traducción automática con Google Translate, sin valor legal)

Description

DESCRIPCIÓN
Aparato y procedimiento de análisis de roturas
Campo
Esta invención se refiere en general a un aparato y a un procedimiento. En particular, pero no exclusivamente, la invención se refiere a un aparato y un procedimiento para analizar roturas en paneles de acristalamiento de vehículos. Además, en particular, pero no exclusivamente, la invención se refiere a un procedimiento y un aparato que se utilizarán para analizar grietas en el vidrio, particularmente un panel de vidrio de un vehículo.
Antecedentes
Al conducir, la presencia de desechos y otros materiales en la carretera puede hacer que dicho material se desvíe en el camino del tráfico que, cuando dicho material choca con un parabrisas, puede causar grietas, roturas u otros daños que se manifiestan en dichos parabrisas que requieren la necesidad de reparar o reemplazar el panel de vidrio del vehículo.
Por razones de seguridad y de economía, es imperativo que dicho trabajo se realice lo más rápido posible, ya que estas grietas pueden propagarse más hacia el parabrisas debido a la influencia del clima frío, por ejemplo, que puede hacer que la grieta crezca. Esto puede hacer que la grieta cambie de una que necesite una reparación menor a una que requiera la necesidad de un reemplazo completo del parabrisas.
Se requiere una evaluación para determinar si el daño al panel de vidrio de un vehículo puede remediarse mediante reparación. Si la evaluación indica que la reparación no es factible, será necesario reemplazar el panel de acristalamiento.
Los aspectos y realizaciones se concibieron teniendo en cuenta lo anterior.
El documento WO2015173594 puede describirse generalmente como que divulga un procedimiento de análisis de roturas para analizar roturas en un panel de acristalamiento de un vehículo, comprendiendo el procedimiento: capturar una imagen de una rotura en un panel de acristalamiento de un vehículo y procesando la imagen de la rotura; en donde la imagen se captura mediante un dispositivo informático móvil que comprende una cámara.
El documento US6115118 divulga un sistema de escaneo de parabrisas programado para recibir datos de imágenes de escáner y analizar muestras representativas de los datos de imágenes de escáner para determinar la condición de superficie general del parabrisas o la condición de superficie dada por la peor muestra.
La presente invención proporciona un procedimiento de análisis de roturas según las reivindicaciones adjuntas. El aparato para uso en el procedimiento comprende un dispositivo informático móvil que comprende la cámara. Un dispositivo informático móvil es un dispositivo electrónico que está configurado para capturar imágenes. Esto puede incluir un teléfono móvil (por ejemplo, un teléfono inteligente), un ordenador portátil, una tableta, un tabléfono o una cámara. El dispositivo informático móvil incluye una cámara para capturar imágenes.
El dispositivo informático móvil puede comprender también el módulo de procesamiento.
La invención permite utilizar una imagen de una rotura en una superficie para analizar la rotura. Esto elimina la necesidad de asistencia física por parte de un técnico para realizar cualquier análisis de la grieta.
La determinación de la necesidad de un panel de acristalamiento de reemplazo puede basarse en el procesamiento de la imagen. Por tanto, el procedimiento puede incluir la etapa de determinar si el panel de acristalamiento necesita ser reemplazado o no, y/o si el panel de acristalamiento es adecuado para su reparación, basándose en el procesamiento de la imagen.
El dispositivo informático móvil puede ser, por ejemplo, un teléfono móvil, tal como un teléfono inteligente provisto de una cámara. La invención puede implementarse a través de un componente de software para procesar datos de imagen de la cámara con el fin de determinar si la rotura se puede reparar o se necesita reemplazo. El componente de software se puede descargar en el dispositivo, por ejemplo, como una aplicación independiente o similar. El componente de software puede comprender un algoritmo para realizar la determinación y también mostrar preferiblemente instrucciones de usuario sobre cómo implementar el procedimiento de determinación.
Un componente de software puede descargarse a un dispositivo informático móvil que tiene una cámara, el componente de software dispuesto para procesar la información de la imagen capturada a través de la cámara con el fin de determinar si la rotura se puede reparar o se prefiere reemplazar.
El dispositivo informático móvil se inclina para ver la rotura en una posición predeterminada en un campo de visión de la cámara. Se logra una posición de referencia asegurando que el dispositivo informático esté inclinado hacia el panel con un borde en contacto con el panel.
La posición predeterminada en la que el dispositivo informático móvil se inclina para ver la rotura puede indicarse mediante marcas visualizadas en la cámara o en el dispositivo informático móvil que comprende la cámara (por ejemplo, en una pantalla).
Adicional o alternativamente, las marcas pueden indicar el centro del campo de visión (por ejemplo, en una pantalla). Opcionalmente, la cámara o el dispositivo informático móvil se puede colocar inicialmente plano sobre la superficie del panel de acristalamiento. A continuación, el dispositivo informático móvil puede girarse o inclinarse lejos del panel de acristalamiento, en el que al menos una parte del dispositivo informático móvil permanece en contacto con el panel de acristalamiento.
Opcionalmente, la cámara se coloca en una posición predeterminada con respecto a la rotura antes de que el dispositivo informático móvil gire. Por ejemplo, el procedimiento puede incluir alinear una característica del dispositivo informático móvil en una posición predeterminada con respecto a la rotura.
En algunas realizaciones, un borde del módulo de captura de imágenes, tal como el borde superior, puede alinearse adyacente (o inmediatamente debajo) del punto más bajo de la rotura. Esto significa que la distancia inicial entre la cámara y el punto más bajo de la rotura se puede determinar utilizando la geometría del dispositivo informático móvil. A continuación, el módulo de captura de imágenes o el dispositivo informático móvil puede girarse alejándose del panel de acristalamiento, en el que un borde inferior del dispositivo informático móvil permanece en contacto con el panel de acristalamiento. A continuación, se captura la imagen de la rotura.
El procedimiento puede incluir girar o inclinar el dispositivo informático móvil hasta que la rotura sea visible en una posición predeterminada en un campo de visión de la cámara.
Opcionalmente, el procedimiento incluye girar el dispositivo informático móvil hasta que la rotura esté en el centro del campo de visión de la cámara.
El procedimiento puede incluir el uso de parámetros geométricos del dispositivo informático móvil y parámetros de la lente de la cámara para estimar los parámetros de la rotura. Los parámetros de la rotura incluyen una o más dimensiones espaciales indicativas del tamaño de la rotura.
Por ejemplo, mediante el uso del procedimiento anterior, los parámetros geométricos del dispositivo informático móvil y los parámetros de la lente de la cámara pueden usarse para determinar la longitud de uno o más tramos de la rotura y/o el tamaño (por ejemplo, ancho/diámetro) del centro de la rotura.
Pueden usarse parámetros geométricos del dispositivo informático móvil para determinar el ángulo de rotación (o ángulo de giro) entre el dispositivo informático móvil y el panel de acristalamiento.
Si el tamaño estimado de la rotura (por ejemplo, la longitud de uno de los tramos de la rotura) supera un umbral determinado, el procedimiento puede determinar que el panel de acristalamiento debe ser reemplazado. Si el tamaño estimado de la rotura (por ejemplo, la longitud de uno de los tramos de la rotura) es menor que un umbral dado, el procedimiento puede determinar que el panel de acristalamiento es adecuado para su reparación.
El procesamiento de la imagen puede basarse en parámetros geométricos del dispositivo informático móvil para capturar la imagen de la rotura.
El procesamiento de la imagen puede basarse además en parámetros de chip para la cámara y/o dispositivo informático móvil.
El procesamiento de la imagen puede generar un conjunto de puntos de datos que se utilizan para generar un diámetro para la rotura que se puede utilizar para determinar el requisito de un panel de acristalamiento de vehículo de repuesto.
El procedimiento puede incluir la emisión de una señal o indicación que indique si el panel de acristalamiento necesita ser reparado o reemplazado.
La rotura del panel de acristalamiento puede comprender un centro y uno o más tramos. Esta formación de rotura es común cuando una piedra pequeña u otro objeto impacta un panel de acristalamiento. Uno o más tramos (o grietas) generalmente se irradian desde el centro de la rotura.
El centro de la rotura puede tener una forma sustancialmente circular.
La determinación de la necesidad de un reemplazo o reparación de un panel de acristalamiento puede comprender generar datos indicativos de un centro de rotura y uno o más tramos de rotura.
El procedimiento puede incluir identificar un centro de la rotura y uno o más tramos de la rotura.
El procedimiento puede incluir generar un factor de escala que indique la longitud relativa de uno o más tramos de la rotura en comparación con el tamaño del centro de la rotura. El tamaño del centro de la rotura puede ser el diámetro, ancho y/o largo del centro de la rotura.
El procedimiento puede incluir estimar la longitud de uno o más tramos de la rotura (es decir, la longitud absoluta en cm o mm, etc.) usando el factor de escala. Por ejemplo, la longitud de uno o más tramos se puede estimar multiplicando el factor de escala por un valor predeterminado.
El valor predeterminado puede ser una estimación del tamaño real (es decir, absoluto) del centro de la rotura. Esto proporciona la ventaja de que no se requiere ningún objeto de calibración, lo que al menos es más conveniente para el usuario.
Por tanto, el procedimiento de la presente invención puede comprender determinar la escala de la imagen para estimar la longitud de uno o más tramos de la rotura.
Si la longitud estimada de uno o más tramos excede un umbral dado, el procedimiento puede determinar que el panel de acristalamiento necesita ser reemplazado. Si la longitud estimada de uno o más tramos es menor que un umbral dado, entonces el procedimiento puede determinar que la rotura en el panel de acristalamiento es adecuada para la reparación.
El procedimiento puede comprender la emisión de una señal que indique que se requiere la reparación del panel de acristalamiento si la longitud estimada de uno o más tramos es menor que el umbral dado.
El procedimiento puede comprender la emisión de una señal que indique que se requiere el reemplazo del panel de acristalamiento si la longitud estimada de uno o más tramos excede el umbral dado.
Se ha encontrado que el tamaño del centro de la rotura varía generalmente menos que la longitud de uno o más tramos de la rotura cuando se comparan diferentes roturas en paneles de acristalamiento. Como tal, el valor predeterminado puede ser un promedio o un modo de los tamaños medidos del centro de una rotura en un panel de acristalamiento. Opcionalmente, la estimación del ancho (o diámetro) real del centro de la rotura (es decir, el valor predeterminado) puede estar entre 1 mm y 3 mm. Un ancho (o diámetro) predeterminado particularmente preferido del centro de la rotura puede ser de 2 mm. Estos intervalos/valores se han determinado a partir de estudios de roturas realizados por el solicitante.
El efecto de esto es que el tamaño estimado del centro de la rotura, tal como el diámetro estimado del centro de la rotura, se puede usar para estimar la longitud de los tramos de la rotura, ya que el valor predeterminado se puede usar para escalar entre la longitud relativa de uno o más tramos en relación con el tamaño del centro de la rotura y la longitud real estimada de uno o más tramos de la rotura.
Por ejemplo, si sabemos que el centro de la rotura siempre tendrá alrededor de 2 mm de ancho (o diámetro) y los datos de la imagen generada indican que los tramos tienen el doble de longitud que el diámetro del centro de la rotura, entonces el procedimiento puede comprender multiplicar 2 mm por un factor de escala de 2. Esto estima que los tramos tienen 4 mm de longitud. Esto ayuda a construir una imagen, en los datos, de las dimensiones de la rotura.
La longitud generada (o estimada) de uno o más tramos puede usarse para indicar el tamaño estimado de la rotura. El tamaño de la rotura puede compararse con un parámetro de umbral para determinar la necesidad de reemplazar o reparar el panel de acristalamiento.
Si el tamaño estimado de la rotura excede un umbral dado, entonces el procedimiento puede determinar que el panel de acristalamiento necesita ser reemplazado. Si el tamaño estimado de la rotura es menor que un umbral dado, entonces el procedimiento puede determinar que el panel de acristalamiento es adecuado para su reparación. La comparación puede realizarse entre el parámetro de umbral de rotura y la mayor distancia a través de la rotura. Opcionalmente, la estimación predeterminada del tamaño del centro de la rotura puede depender de uno o más parámetros. Los parámetros pueden ser introducidos por el usuario y/o preestablecidos en el dispositivo o módulo de procesamiento. Por ejemplo, los parámetros pueden incluir: una o más propiedades del panel de acristalamiento (tales como el tipo, tamaño, etc.) y/o la velocidad a la que viajaba el vehículo cuando se produjo la rotura.
El procesamiento de la imagen puede comprender filtrar la imagen para eliminar una parte de fondo para identificar la rotura.
Se puede aplicar un refinamiento morfológico a la imagen para eliminar cualquier desorden de la imagen y mejorar la calidad de los datos de la imagen utilizados como base para determinar si se requiere un panel de acristalamiento de reemplazo.
El procedimiento puede incluir la limpieza del panel de acristalamiento antes de capturar la imagen de la rotura. Esto puede ayudar a eliminar cualquier suciedad que pueda afectar al procesamiento de la imagen. Por ejemplo, existe el riesgo de que el software de procesamiento de imágenes interprete la suciedad como una rotura.
El procedimiento puede incluir la desactivación de una función de flash del módulo o dispositivo de captura de imágenes antes de capturar una imagen de la rotura. Si se utiliza fotografía con flash, la luz puede afectar negativamente a la precisión del software de procesamiento de imágenes. Por ejemplo, el destello puede reflejarse en el panel de acristalamiento, lo que puede afectar a la identificación o análisis de la rotura.
El procedimiento puede implementarse usando instrucciones implementadas por ordenador que, cuando se instalan en la memoria, instruyen a un procesador para implementar un procedimiento como se define anteriormente. Se prefiere un componente de software descargable (tal como una aplicación).
Se apreciará que cualquier característica del procedimiento se puede realizar usando el aparato de la presente invención.
Estos y otros aspectos de la presente invención resultarán evidentes y se aclararán con referencia a la realización descrita en la presente memoria.
Descripción
A continuación se describirán primeras y segundas realizaciones, únicamente a modo de ejemplo, y con referencia a los dibujos adjuntos, en los que:
La figura 1 ilustra un parabrisas con una grieta;
La figura 2 ilustra el uso de una cámara para capturar una imagen de una grieta;
La figura 3 ilustra un módulo de procesamiento que puede usarse para analizar la grieta en el parabrisas de la figura 1;
La figura 4 ilustra un diagrama de flujo que detalla las etapas involucradas en la evaluación de una grieta en el parabrisas utilizando el sistema de la figura 3;
La figura 5 ilustra una imagen de una transformada de Fourier de una grieta; y
La figura 6 ilustra una imagen delineada de una grieta.
La figura 7 ilustra una disposición que puede usarse para modelar una grieta 102;
La figura 8 ilustra las etapas involucradas en la generación de parámetros de rotura;
La figura 9a ilustra esquemáticamente el campo de visión de una cámara con una vista de pájaro de un parabrisas; La figura 9b ilustra esquemáticamente el campo de visión de una cámara con una vista inclinada de un parabrisas; La figura 10 ilustra cómo se puede modelar una cámara para usar los parámetros de la cámara para analizar la grieta; y
La figura 11 ilustra una imagen que sale del sistema para determinar el tamaño de una grieta en un parabrisas. A continuación sigue la descripción de dos métodos. El primer método si se practica solo no cae dentro del alcance de las reivindicaciones. Sin embargo, si se practica en combinación con el Segundo método, la técnica cae dentro del alcance de las reivindicaciones.
En una primera realización, la figura 1 ilustra un parabrisas de vidrio 100 con una grieta 102 causada por una piedra que ha sido arrojada sobre el parabrisas. El conductor del automóvil en el que está alojado el parabrisas de vidrio 100 captura entonces una imagen de la grieta 102 utilizando un teléfono móvil 104 que comprende una cámara 106 que se utiliza para capturar la imagen de la grieta 102. Esta disposición se muestra desde una perspectiva lateral en la figura 2. La distancia focal de la cámara 106 se fija en menos de 100 milímetros para hacer que el enfoque de la cámara se ajuste a una pequeña distancia.
A continuación, se captura la imagen de la grieta 102, en respuesta a la entrada del usuario, y el teléfono móvil 104 se configura para proporcionar un mensaje al usuario para que solicite que indique que le gustaría que la imagen se transmita desde la cámara 106 a un módulo de procesamiento de imágenes 108 que ahora describiremos con referencia a la figura 3. Esta etapa permite al usuario evaluar la calidad de la imagen por sí mismo para que pueda optar por capturar otra imagen si no considera que la imagen sea clara como, por ejemplo, en condiciones climáticas inclementes donde la condensación puede depositarse en la lente de la cámara 106.
La cámara 106 convierte la imagen capturada en una matriz de datos de imagen utilizando cualquier procedimiento adecuado. La cámara 106 puede guardar los datos de la imagen como un archivo de imagen intercambiable (EXIF) donde también se almacenan los parámetros de la lente de la cámara.
Es decir, la cámara 106 es un ejemplo de un módulo de captura de imágenes que es operativo para capturar la imagen de la grieta 102 y transmitir la imagen capturada en forma de datos de imagen capturados al módulo de procesamiento de imágenes 108 donde puede ser procesado adicionalmente para extraer detalles de la grieta. El módulo de procesamiento de imágenes 108 puede formar parte del teléfono móvil 104 o puede estar geográficamente distante con respecto al teléfono móvil 104. Los datos de imagen se transmiten al módulo de procesamiento de imágenes 108 por cualquier medio adecuado tal como, por ejemplo, un bus de datos o Internet. En una realización preferida, el módulo de procesamiento de imágenes 108 se implementa como un componente de software descargado al teléfono móvil. Esto se puede implementar mediante la descarga del componente de software como una aplicación. El componente de software es capaz de procesar los datos de imagen de la cámara para determinar si la rotura es susceptible de reparación o si es posible que sea necesario reemplazar el panel de acristalamiento como solución preferida.
El módulo de análisis de rotura 112 puede ser un componente de software descargado al teléfono móvil preferiblemente como una única descarga en combinación con el módulo de procesamiento de imágenes 108. Un único componente de software descargado I dispuesto preferiblemente para procesar los datos de imagen de la cámara del teléfono y analizar la interrupción usando uno o más algoritmos implementados en software.
En una implementación, los datos de imagen capturados son recibidos por el módulo de procesamiento de imágenes 108 en la interfaz de entrada de datos 110. Los datos de imagen se transmiten a continuación al módulo de análisis de rotura 112 que está configurado para acceder a una biblioteca de rutinas 114 donde las rutinas se pueden almacenar para realizar operaciones sobre los datos capturados a lo largo del análisis de los datos de la imagen capturada.
El módulo 112 de análisis de roturas está configurado también para acceder a una base de datos 116 de parámetros del dispositivo donde se almacenan los parámetros relacionados con el teléfono móvil 104.
Los parámetros relacionados con el teléfono móvil 104 incluyen parámetros de chip que definen el rendimiento de captura de imagen de la cámara 106 tal como, por ejemplo, la distancia focal y el tamaño del sensor de la lente, y los parámetros dimensionales del teléfono móvil 104 tal como, por ejemplo, la longitud del teléfono móvil 104 y la distancia entre el borde superior del teléfono móvil 104 y el centro de la imagen de la cámara 106.
El módulo de análisis de roturas 112 funciona también para interactuar con un módulo de visualización 118 que es operativo para visualizar datos de imagen transmitidos desde el módulo de análisis de roturas 112 en una pantalla y para visualizar datos paramétricos transmitidos desde el módulo de análisis de roturas 112 en una pantalla.
Ahora describiremos, con referencia a la figura 4, el análisis de la grieta 102 usando el módulo de análisis de rotura 112.
El módulo de análisis de rotura 112 recibe los datos de imagen en una etapa S400. El módulo de análisis de rotura 112 a continuación, en una etapa S402, requiere una rutina de transformada de Fourier de la biblioteca de rutinas 114 y usa la rutina de transformada de Fourier para aplicar una transformada de Fourier discreta bidimensional a los datos de imagen para producir una imagen de transformación como se ilustra en la figura 5a.
En la figura 5a podemos ver la imagen transformada. La figura 5a traza la frecuencia espacial frente a la magnitud del respectivo componente de Fourier. Se verá que las frecuencias espaciales bajas ocupan el centro de la imagen transformada y se pueden ver frecuencias espaciales más altas a medida que nos alejamos del centro de la imagen transformada.
La toma de una transformada de Fourier de la imagen permite al módulo de análisis de rotura 112 realizar el análisis de la imagen en términos de sus frecuencias espaciales componentes y fase. Como se describirá ahora, permite eliminar las frecuencias espaciales en las que no tenemos interés y nos permite reconstruir la imagen que nos interesa conservando las frecuencias espaciales de interés.
A continuación, se aplica un filtro de paso de banda de Butterworth a la imagen transformada en una etapa S404 mediante el módulo de análisis de rotura 112. La máscara implementada por el filtro de paso de banda de Butterworth se ilustra en la figura 5b. El filtro de paso de banda de Butterworth implementa una máscara en la imagen transformada que se muestra en la figura 5a y elimina las frecuencias espaciales bajas (mostradas por el punto negro en el centro de la figura 5b) y las frecuencias espaciales muy altas (el borde oscuro en la imagen de la figura 5b) que representa motas de polvo y suciedad en la imagen.
La transformada de Fourier de los datos de imagen se invierte a continuación en una etapa S406 solicitando una rutina de Inversión de Transformada de Fourier desde la biblioteca de rutinas 114 para realizar una transformada de Fourier bidimensional discreta inversa en los datos de imagen transformados.
El rendimiento de la transformada de Fourier inversa en los datos de la imagen transformada transforma los datos de la imagen transformada del dominio de Fourier en el dominio real para generar datos de imagen del dominio real. Los datos de imagen de dominio real resultantes se ilustran en las figuras 6a y 6b.
El uso de la transformada de Fourier para producir la imagen ilustrada en la figura 6b tiene el efecto de aislar la grieta del fondo.
Los datos de la imagen del dominio real se comparan con un umbral de intensidad de 4, en una etapa S408, para delinear las áreas de interés más claramente.
La figura 6a muestra los datos de la imagen del dominio real sin utilizar un filtro de paso de banda de Butterworth. La figura 6b muestra los datos de imagen de dominio real después de aplicar el filtro de paso de banda de Butterworth a los datos transformados ilustrados en la figura 5a y aplicar el umbral para generar una imagen binaria usando una intensidad de umbral de 4. El filtro de paso de banda de Butterworth en este ejemplo tiene un valor de atenuación de 3. Las frecuencias de corte superior e inferior del filtro de paso de banda de Butterworth se pueden modelar como dependientes linealmente del número de píxeles en el lado más largo de la imagen (indicado como m) y se pueden expresar respectivamente como:
Figure imgf000007_0001
Esta relación puede modificarse mediante ensayos estándar y experimentos numéricos.
La imagen ilustrada en la figura 6b es una imagen que puede incluir más que solo la grieta 102. También puede incluir datos de imagen que han pasado por las etapas S400 a S408 pero se deben a manchas de suciedad en el parabrisas y otros artefactos del procesamiento realizado por el módulo de análisis de rotura 112.
El uso de la intensidad umbral de 4 para generar la imagen binaria que se muestra en la figura 6b ayuda a mostrar las áreas de interés con mayor claridad. La imagen mostrada por los datos de imagen de dominio real ilustrados en la figura 6b resalta la grieta, incluida el área de la grieta central, que es un área de baja frecuencia espacial.
Como se puede ver, el enfoque de Fourier hace un trabajo muy limpio al aislar la región de la grieta del fondo desordenado, asumiendo que está enfocado y el fondo no.
El módulo de análisis de roturas 112 puede solicitar a continuación una rutina de morfología de la biblioteca de rutinas 114 para eliminar cualquier desorden de la imagen ilustrada en la figura 6b en una etapa S410.
La rutina de morfología realiza varias operaciones sobre la imagen ilustrada en la figura 6b. Esta imagen es una imagen binaria. Las regiones de negro tienen un valor cero y las regiones de blanco tienen un valor distinto de cero. El valor de los píxeles se almacena en la memoria del módulo de análisis de rotura 112 y es el resultado del procesamiento en las etapas S400 a S408.
La primera de estas operaciones es una operación de relleno que utiliza la reconstrucción morfológica para rellenar regiones de negro del tamaño de un píxel que están rodeadas por regiones de blanco con blanco reemplazando el valor cero con un valor distinto de cero de acuerdo con el procedimiento establecido en [1].
La segunda de estas operaciones es una operación de limpieza que descarta regiones muy pequeñas de valor distinto de cero. Las regiones con valores muy pequeños distintos de cero se definen como regiones con valores distintos de cero que ocupan un área menor que el cuadrado de (dimensión más grande de la imagen/500). La dimensión más grande de la imagen se puede determinar mediante el módulo de análisis de rotura simplemente comparando la longitud del ancho de la imagen con la longitud de la imagen.
A continuación, se repite la primera operación morfológica para rellenar las regiones de negro del tamaño de un píxel que estén rodeadas por regiones de blanco que hayan sido generadas por la segunda operación morfológica. Esta es una tercera operación morfológica.
A continuación, se realiza una cuarta operación morfológica para unir los tramos en la imagen de la grieta 102 que tienen huecos en ellos. Esto se implementa mediante una operación de cierre morfológico como se describe en [2]. Se realiza una erosión seguida de una dilatación haciendo uso de un elemento estructurante en forma de disco con un radio de (dimensión más grande de la imagen\5312) multiplicado por 20. El valor de 20 se ha determinado empíricamente y puede cambiar. Este valor se puede determinar sin ninguna carga indebida para diferentes resoluciones de imagen.
A continuación, se repite la primera operación morfológica para rellenar las regiones de negro del tamaño de un píxel que están rodeadas por regiones de blanco que se han generado mediante la cuarta operación morfológica. Esta es la quinta operación morfológica.
A continuación se realiza una sexta operación morfológica para descartar cualquier región pequeña distinta de cero. Las regiones pequeñas se definen como regiones con un área igual al cuadrado de (dimensión más grande de la imagen/100).
A continuación se realiza una séptima operación morfológica para eliminar cualquier objeto desconectado en la imagen. Los objetos de interés desconectados son objetos que están más lejos que % del radio del objeto más grande más cercano al centro de la imagen. Esto significa que se incluyen los tramos de la grieta que aún están desarticulados, pero se incluyen los artefactos superfluos. La séptima operación morfológica se implementa encontrando, para cada región restante en la imagen, el centroide, es decir, el centro de masa de la imagen, y la longitud del eje mayor de la región. Se asigna una ponderación adicional a cada área de región en función de lo cerca que esté el centroide del centro de la imagen.
La ponderación w = 1/d2 donde d es la distancia euclidiana entre el centroide y el centro de la imagen. Se selecciona la región más grande, la más cercana al centro de la imagen, y la longitud de su eje principal se usa para establecer un radio (o % la longitud del eje mayor desde su centroide) fuera del cual se descartan las regiones. Es decir, la rutina de morfología y el centroide a los cálculos de límites están configurados para retener todas las "manchas" dentro de una distancia desde el centro de la grieta del radio del objeto más grande en la imagen más la mitad de ese radio para asegurar que cualquier discontinuidad en la grieta 102 no se pierda.
Los datos de la imagen, después de que se haya aplicado la morfología para refinar los datos de la imagen, se pueden usar para determinar las dimensiones de la grieta 102.
El módulo de análisis de rotura 112 aplica más detección de bordes, morfología, difuminación y umbralización para determinar el centro de la grieta 102.
Se ha observado mediante experimentación que el centro de una grieta suele tener alrededor de 2 mm de diámetro. El módulo de análisis de rotura 112 es operativo para, usando los datos de imagen refinados y los datos que resultan de la determinación del centro de la grieta 102, estimar la longitud de los tramos de la grieta 102 y determinar un valor proporcional que caracteriza la longitud de los tramos en comparación con el diámetro del centro de la grieta 102, que es un factor de escala para los tramos en comparación con el centro de la grieta 102. Usando la observación de que el centro de la grieta suele ser de 2 mm, el factor de escala puede entonces ser utilizado para determinar la longitud de los tramos. Esto proporciona un análisis no calibrado del tamaño de una grieta 102.
La longitud determinada de los tramos se puede utilizar para aproximar el tamaño de la grieta 102 y permite que el módulo de análisis de rotura 112 dé como resultado una determinación de si será necesario un parabrisas de repuesto o si la reparación será suficiente, ya que es el tamaño de un grieta lo que es importante para hacer esta determinación y comparando el tamaño de la grieta 102 con un umbral de reparación/reemplazo, el módulo de análisis de rotura 112 puede automatizar esta determinación. El módulo de análisis de rotura 112 enviará esta determinación al módulo de visualización 118.
La salida, es decir, si se necesita o no un parabrisas de repuesto, se visualiza entonces usando el módulo de visualización 118 en una etapa S412.
El uso de una estimación observada del centro de una grieta para estimar el tamaño de los tramos de una grieta, que se basa en la suposición de un grado de punción radial en una grieta, significa que se puede tomar una imagen de una grieta y utilizarla para analizar la grieta sin ninguna calibración en la escena para proporcionar una escala para la grieta 102.
Este procedimiento permite realizar un análisis de la grieta en un amplio intervalo de condiciones y sin la asistencia de un técnico.
En una segunda realización, ahora describimos cómo derivar los parámetros de la grieta 102 usando los parámetros del teléfono móvil 104 y la lente de la cámara 106. Esto puede ayudar a corregir cualquier influencia que el ángulo tenga sobre la imagen.
La segunda realización se puede combinar con la primera realización sin salirse de esta divulgación.
La disposición ilustrada en la figura 7 puede permitir estimar las dimensiones de la grieta usando los parámetros del chip de la cámara 106 y los parámetros geométricos del teléfono móvil 104.
Para calcular el ángulo de rotación (o ángulo de giro o inclinación) del teléfono móvil 104 con respecto al parabrisas, podemos utilizar los parámetros geométricos del teléfono móvil 104.
Al colocar la grieta 102 en el centro del campo de visión de la lente de la cámara 106, permite dibujar un triángulo rectángulo. Esto se describe con respecto a la figura 7.
Una vez que se ha descubierto la grieta 102, el teléfono móvil 104 se coloca plano sobre el parabrisas con el borde superior en la base de la grieta 102. Esto significa que la distancia entre el borde inferior del teléfono móvil 104 y la base de la grieta es igual a la longitud del teléfono móvil 104. El teléfono móvil 104 se inclina entonces desde el borde inferior del teléfono móvil 104 hasta que la grieta 102 esté en el centro del campo de visión de la cámara 106. Pueden proporcionarse indicaciones en la pantalla del teléfono móvil 104 para indicar el centro del campo de visión. La distancia entre el borde inferior del teléfono móvil 104 y la lente de la cámara 106 se puede recuperar de la base de datos de parámetros del dispositivo 116. Por lo tanto, se forma un triángulo rectángulo definido por el ángulo de rotación entre el borde inferior del teléfono móvil 104 y el parabrisas 100, el eje z de la lente de la cámara y la distancia formada entre el borde inferior y la base de la grieta.
Ahora describimos cómo se pueden utilizar los parámetros geométricos del teléfono móvil 104 y los parámetros de la lente para estimar los parámetros de la grieta.
Se captura una imagen de la grieta de forma coherente con el procedimiento descrito anteriormente en el que el teléfono móvil 104 se gira hasta que la grieta 102 está en el centro del campo de visión de la cámara 106.
Esto permite que se forme un triángulo rectángulo mediante el eje z de la lente de la cámara, la distancia formada entre el borde inferior y la base de la grieta y la longitud entre el borde inferior y la lente de la cámara.
Con referencia a la figura 8, describimos cómo se pueden utilizar la geometría del teléfono móvil 104 y los parámetros de la lente para estimar los parámetros de la rotura.
En la etapa S800, el módulo de análisis de rotura 112 recupera la distancia formada entre el borde inferior del teléfono móvil 104 y la base de la grieta (es decir, la longitud del teléfono móvil 104) y la longitud entre el borde inferior del teléfono móvil 104 y la lente de la cámara de la base de datos de parámetros del dispositivo 116. El ángulo de rotación del teléfono móvil 104 se puede calcular en una etapa S802 usando la relación del coseno entre la distancia formada entre el borde inferior y la base de la grieta y la longitud entre el borde inferior y la lente de la cámara.
A continuación, necesitamos usar los parámetros de las cámaras para derivar un mapeo homogéneo plano-plano entre los píxeles de la cámara y las dimensiones espaciales del mundo real de la imagen. A continuación, se solicita una rutina de mapeo homográfico de plano a plano desde la biblioteca de rutinas 114 en una etapa S804 para derivar las dimensiones espaciales del mundo real de la imagen.
La derivación del mapa homográfico para proporcionar las dimensiones espaciales de la imagen en el mundo real se basa en el "modelo de cámara estenopeica", en el que una cámara piensa en el área de visualización de la cámara como un cono de base rectangular que se expande en relación con la lente de la cámara 106. Esto se ilustra esquemáticamente en las figuras 9a y 9b.
La figura 9a es solo para ilustración e ilustra el caso en el que el teléfono móvil 104 está situado directamente encima del parabrisas 100. Es decir, la cámara 106 proporciona una vista de pájaro del parabrisas 100. En este caso, el área de visión A1 es un rectángulo y cada píxel ocupa la misma cantidad de espacio del mundo real (en milímetros).
En este caso, y como se ilustra en la figura 9b, el teléfono móvil 104 forma un ángulo con respecto al parabrisas 100. El ángulo se calculó en la etapa S802. El área de visión A2 se convierte entonces en un trapecio, lo que significa que los píxeles cercanos a la cámara representan menos milímetros que los píxeles que están más lejos.
Describimos la base teórica de cómo se deriva el mapa homográfico plano a plano, pero se entenderá que esto se implementará numéricamente utilizando rutinas que estarán disponibles para el módulo de análisis de rotura 112 usando las rutinas disponibles utilizando la biblioteca de rutinas 114.
Considere un sensor de imagen rectangular que forma parte de la cámara 106 y un sensor inclinado desde un plano plano por un ángulo de rotación 0, el área observada por el sensor se asigna a un trapecio isósceles. El ancho de las bases de este trapecio depende directamente de 0. Usando la rutina de mapeo homográfico plano a plano podemos usar este principio para estimar numéricamente los parámetros de la grieta 102 usando el conocimiento de los píxeles en la cámara 106.
Definimos una matriz de rotación 3D, alrededor del eje x, en función de 0, como:
Figure imgf000009_0001
Se entenderá que 0 es el ángulo del teléfono móvil 104 con respecto al parabrisas. Podemos definir un origen en las dimensiones cartesianas x, y y z en (0,0,0), es decir, el origen mundial. Este es el punto en el medio del borde de la base del teléfono móvil 104 que está alineado con el eje x. El eje y de este sistema de coordenadas se dirige verticalmente desde la base hasta la parte superior del teléfono. Si asumimos, por simplicidad y sin pérdida de generalidad, que la cámara se encuentra sobre el eje y, a cierta distancia de desde la base del teléfono. Por tanto, el centro de la cámara se define como:
Figure imgf000010_0001
La distancia focal y los tamaños de sensor vertical y horizontal de la lente de la cámara 106 se pueden recuperar entonces de la base de datos 116 de parámetros del dispositivo en una etapa S806. Estos parámetros pueden denominarse parámetros de chip. Esto nos permite calcular el área de visión de la cámara. El área de visión está definida por dos cantidades que se denominan ángulo de visión horizontal y vertical (denotados respectivamente como aH y av) y se definen mediante las siguientes ecuaciones:
Figure imgf000010_0002
Donde sx y sy son el tamaño del sensor horizontal y vertical y f es la distancia focal.
Habiendo calculado el ángulo de visión horizontal y vertical, el módulo de análisis de rotura 112 usa la rutina de mapeo homogéneo plano a plano para calcular los bordes de la pirámide de visión para proporcionarnos un campo de visión en el parabrisas 100 en una etapa S808. Esto proporciona el trapecio ilustrado esquemáticamente en la figura 9b, es decir, el trapecio que necesitamos corregir para compensar las diferentes cantidades de espacio que ocupan los píxeles más alejados de la lente en relación con los píxeles más cercanos a la lente. Es decir, necesitamos escalar el trapecio para asegurarnos de que los cálculos anteriores atribuyan cantidades iguales de espacio del mundo real a cada píxel.
Esto se modela en la rutina de mapeo homográfico plano a plano utilizada por el módulo de análisis de rotura 112 mediante una línea, es decir, un rayo, que se extiende desde la lente a lo largo de la línea de visión entre la lente y la grieta 102. Esta línea intersecará el plano representado por el parabrisas, es decir, la rutina de cartografía homogénea de plano a plano se modela como un plano.
En la etapa S810, la rutina de mapeo homográfico plano a plano solicita una rutina de resolución numérica de la biblioteca de rutinas 114 para resolver las ecuaciones simultáneas que definen el plano del parabrisas y la línea que se extiende desde la lente a lo largo de la línea de visión entre la lente. y la grieta 102. La rutina de cartografía homogénea de plano a plano se programa bajo el supuesto de que el plano que define el parabrisas 100 es plano y la cámara 106 está inclinada con respecto a él. Esto proporciona la intersección entre la línea que se extiende desde la lente a lo largo de la línea de visión y el plano del parabrisas 100.
Teóricamente, esto se puede expresar como el cálculo de los rayos que emanan desde el punto en el centro de la cámara a través de las esquinas del sensor/plano de imagen y sobre el parabrisas que forma el trapecio mencionado anteriormente.
Primero obtenemos la intersección de los rayos con un plano, paralelo al plano de la imagen, a una distancia unitaria, dados los ángulos de visión horizontal y vertical de aH y av respectivamente como se define más arriba. Hay cuatro rayos, uno para cada esquina del sensor rectangular. Los valores de x mínimo y máximo se pueden definir como:
Figure imgf000010_0003
Del mismo modo, podemos definir los valores mínimos y máximos de y como:
Figure imgf000010_0004
Figure imgf000011_0001
A continuación podemos definir las esquinas del sensor rectangular como:
Figure imgf000011_0002
Normalizar estas coordenadas por su magnitud nos proporciona la dirección de los 4 rayos. Definimos la dirección del rayo para cada una de estas coordenadas como:
Figure imgf000011_0003
Si suponemos que el teléfono se gira, en el eje x, en 0, podemos calcular que la posición del centro de la cámara es ahora:
Figure imgf000011_0004
Esto nos permite definir la dirección de los rayos como:
Figure imgf000011_0007
Esto nos da los rayos en coordenadas cartesianas con un punto conocido de intersección con el plano paralelo al plano de la imagen y ahora sabemos que esta intersección ocurre solo una vez. Esto proporciona un trapecio que indica el campo de visión en el mundo real.
Definimos las esquinas del trapecio como:
Figure imgf000011_0005
Calculamos los vértices del trapecio usando la fórmula de intersección del plano de la línea descrita en [3].
Sabemos que la normal al plano del parabrisas es el vector n = (0,0, -1) y que se encuentra en el origen mundial, lo que significa que la fórmula de intersección se simplifica a:
Figure imgf000011_0006
Donde los puntos v/, i e (ti, tr, br, bl) definen los vértices del trapecio que necesitamos para definir el mapeo homográfico H desde el plano de la imagen al plano en el mundo real usando la técnica de correspondencia de cuatro puntos entre los vértices del trapecio y las coordenadas de la imagen:
Figure imgf000011_0008
Figure imgf000012_0001
Donde w es el ancho de la imagen y h es la altura de la imagen. El algoritmo que analiza cómo se obtiene este mapa homográfico se analiza en [4].
La altura de la cámara por encima del parabrisas puede calcularse mediante el módulo de análisis de rotura 112 usando el teorema de Pitágoras como la distancia formada entre el borde inferior del teléfono móvil 104 y la base de la grieta (es decir, la longitud del teléfono móvil 104) y la longitud entre el borde inferior del teléfono móvil 104 y la lente de la cámara se ha recuperado de la base de datos 116 de parámetros del dispositivo en la etapa S800 y todavía está en la memoria del módulo de análisis de rotura 112.
La salida de la etapa S810 es el trapecio de la vista en el mundo real (X1, X2 , X3 , X4). Una comparación entre los parámetros (X1 , X2 , X3 , X4) y las esquinas de la imagen capturada en el parabrisas (realizado por el módulo de análisis de rotura 112 en la etapa S812) proporcionan la escala necesaria para mapear la ubicación de los píxeles de la cámara 106 a ubicaciones en milímetros en el campo de visión en el parabrisas. 100. Esto nos proporciona el mapa homográfico plano a plano. La escala tiene la forma de una matriz de 3x3 que representa la escala, la rotación, el sesgo y la traslación entre el campo de visión de la cámara y el parabrisas 100.
El mapa homográfico plano a plano permite la corrección del efecto de la perspectiva sobre la imagen capturada y la conversión de las dimensiones de los píxeles a milímetros, lo que permite al módulo de análisis de rotura 112 derivar parámetros dimensionales para la grieta 102.
El mapa homográfico de plano a plano es una matriz que mapea el plano de imagen bidimensional de la cámara 106 sobre un plano que representa el parabrisas.
La salida del mapa homográfico plano a plano proporciona una máscara ortorrectificada, en milímetros, que indica la ubicación y la forma de la grieta.
En respuesta a esta salida del mapa homográfico de plano a plano, que será, como se entenderá, la salida de la rutina de mapeo homográfico de plano a plano, el módulo de análisis de rotura 112 solicita una rutina de cálculo de envolvente convexa de la biblioteca de rutinas 114. Las ubicaciones en milímetros en el campo de visión del parabrisas se proporcionan a la rutina de cálculo de la envolvente convexa desde la biblioteca de rutinas 114.
Una envolvente convexa es, en resumen, un espacio que cubre cada una de las ubicaciones en milímetros en el campo de visión. La salida de la rutina de cálculo de la envolvente convexa son datos que pueden expresarse, en términos simples, como una "mancha" que tendrá el mismo tamaño que la grieta detectada 102. Esto permite realizar el análisis en la grieta detectada 102 utilizando la gota.
El módulo de análisis de rotura 112 solicita entonces una rutina de círculo más pequeño de la biblioteca de rutinas 114 que implementa una solución numérica al problema de círculo más pequeño para la envolvente convexa que se genera a partir de la rutina de cálculo de envolvente convexa. Este módulo genera el círculo más pequeño que encierra cada uno de los puntos en la envolvente convexa y por lo tanto proporciona un radio mínimo para la grieta 102.
Los datos que representan la envolvente convexa, los datos que representan la solución al problema del círculo más pequeño para la envolvente convexa y el radio calculado para la grieta son almacenados cada uno por el módulo de análisis de rotura 112 en un almacenamiento que es local al módulo de procesamiento 108 o remoto en relación con el módulo de procesamiento 108.
Es decir, el módulo de análisis de rotura 112 ha utilizado los parámetros geométricos del teléfono móvil 104 y los parámetros de la cámara 106 para generar un radio para la grieta 102.
Los parámetros y la salida del círculo de la rutina del círculo más pequeño pueden entonces visualizarse usando el módulo de visualización 118 en una etapa S814.
En la figura 11 se ilustra una imagen de ejemplo que puede proporcionar el módulo de visualización 118. En este caso, el diámetro del círculo más pequeño se indica como 16 mm, lo que significa un radio de 8 mm. El diámetro de grieta más grande estimado en este caso es de 16 mm. El efecto aquí es que se estima un tamaño mínimo para la grieta y se puede usar para determinar la necesidad de un parabrisas de reemplazo.
El radio estimado se puede comparar con un umbral de reemplazo/reparación por el módulo de análisis de rotura 112 para determinar si la grieta 102 requiere reemplazo o si la reparación será suficiente.
Es probable que la presencia de una carcasa en el teléfono móvil 104 introduzca un error en los parámetros medidos, ya que esto aumentará la longitud del teléfono móvil 104, pero el error es generalmente de alrededor del 3%. Se incorpora un margen de error del 3% en los cálculos del módulo 112 de análisis de rotura y se proporciona en una pantalla mediante el módulo de visualización 118.
También es posible que la distancia entre la base del teléfono móvil 104 y la cámara 106 no esté disponible en la base de datos de parámetros del dispositivo 116. En este caso, podemos estimar el parámetro para mejorar la solidez del procedimiento descrito.
Podemos utilizar un inclinómetro integrado en el teléfono móvil 104 para obtener el ángulo del teléfono móvil cuando se captura la imagen de la grieta 102. Esto se puede usar para calcular la altura h usando la ecuación:
Figure imgf000013_0001
Donde 1 es la longitud del teléfono móvil 104 y el ángulo 0 es el ángulo obtenido del inclinómetro.
De manera similar, el ángulo del teléfono podría estimarse utilizando el ángulo de visión, la resolución de la imagen y el tamaño del sensor.
Como se describe en relación con la primera técnica, en una realización preferida, el módulo de procesamiento de imágenes 108 se implementa como un componente de software descargado al teléfono móvil. Esto se puede implementar mediante la descarga del componente de software como una aplicación. El componente de software es capaz de procesar los datos de imagen de la cámara para determinar si la rotura es susceptible de reparación o si es posible que sea necesario reemplazar el panel de acristalamiento como solución preferida.
El módulo de análisis de rotura 112 puede ser un componente de software descargado al teléfono móvil preferiblemente como una única descarga en combinación con el módulo de procesamiento de imágenes 108. Un único componente de software descargado está preferiblemente dispuesto para procesar los datos de imagen de la cámara del teléfono y analizar la rotura usando uno o más algoritmos implementados en software.
El módulo de análisis de rotura 112 es operativo para proporcionar una alerta en pantalla sobre si se requiere un reemplazo completo del parabrisas en base al radio del círculo más pequeño. Si la grieta 102 está por encima de un umbral especificado, entonces el módulo de análisis de rotura 112 indicará la necesidad de un reemplazo del parabrisas o no. La alerta puede mostrarse en una pantalla del teléfono móvil 104.
Cabe señalar que las realizaciones mencionadas anteriormente ilustran más que limitan la invención, y que los expertos en la materia serán capaces de diseñar muchas realizaciones alternativas sin salirse del alcance de la invención tal como se define en las reivindicaciones adjuntas. En las reivindicaciones, los signos de referencia colocados entre paréntesis no se interpretarán como limitantes de las reivindicaciones. La palabra "que comprende" y "comprende", y similares, no excluye la presencia de elementos o etapas distintas de los enumerados en cualquier reivindicación o la especificación en su conjunto. En la presente memoria descriptiva, "comprende" significa "incluye o consiste en" y "comprende" significa "que incluye o consiste en". La referencia singular de un elemento no excluye la referencia plural de dichos elementos y viceversa. La invención puede implementarse mediante hardware que comprenda varios elementos diferenciados y mediante un ordenador adecuadamente programado. En una reivindicación de dispositivo que enumera varios medios, varios de estos medios pueden realizarse mediante un mismo elemento de hardware. El mero hecho de que se mencionen determinadas medidas en reivindicaciones dependientes diferentes entre sí no indica que una combinación de estas medidas no pueda utilizarse ventajosamente.
Referencias
[1] http://www.mathworks.com/tagteam/64199_91822v00_eddins_final.pdf
[2] https://fen.wikipedia.org/wiki/closing_(morfología)
[3] Joseph O'Rourke "Geometría computacional en C", Cambridge University Press, 2012
[4] Richard Hartley y Andrew Zisserman "Geometría de vista múltiple en visión por ordenador", Cambridge University Press, 2011.

Claims (12)

REIVINDICACIONES
1. Procedimiento de análisis de roturas para analizar roturas en un panel (100) de acristalamiento de un vehículo, comprendiendo el método:
capturar una imagen de una rotura (102) en un panel de acristalamiento de un vehículo;
procesar la imagen de la rotura; en donde la imagen es capturada por un dispositivo (104) informático móvil que tiene una cámara (106);
caracterizado porque el dispositivo (104) informático móvil se mantiene en contacto con la superficie del panel de acristalamiento y se inclina hacia la superficie del panel (100) de acristalamiento para ver la rotura (102) en una posición predeterminada en un campo de visión de la cámara mientras el dispositivo informático se mantiene en contacto con la superficie del panel de acristalamiento.
2. Procedimiento según la reivindicación 1, comprendiendo además el procedimiento:
determinar la necesidad de sustitución o reparación del panel de acristalamiento basado en el procesamiento de la imagen.
3. Procedimiento según cualquiera de las reivindicaciones anteriores, en donde la imagen de la rotura se captura en un ángulo inclinado con respecto al panel de acristalamiento del vehículo.
4. Procedimiento según cualquier reivindicación anterior, en donde la posición predeterminada se indica mediante indicios mostrados en el dispositivo informático móvil.
5. Procedimiento según cualquier reivindicación anterior, que comprende:
colocar el dispositivo informático móvil plano sobre la superficie del panel de acristalamiento; y
girar el dispositivo informático móvil alejándolo del panel de acristalamiento, en donde al menos parte del dispositivo informático móvil permanece en contacto con el panel de acristalamiento.
6. Procedimiento según la reivindicación 5, en donde la cámara se coloca en una posición predeterminada con respecto a la rotura antes de girar el dispositivo informático móvil.
7. Procedimiento según la reivindicación 6, que comprende alinear una característica del dispositivo informático móvil en una posición predeterminada con respecto a la rotura antes de girar el dispositivo informático móvil.
8. Procedimiento según la reivindicación 7, que comprende alinear un borde del dispositivo informático móvil con el punto más bajo de la rotura antes de girar el dispositivo informático móvil.
9. Procedimiento según cualquiera de las reivindicaciones 5 a 8, que comprende girar el dispositivo informático móvil hasta que la rotura sea visible en una posición predeterminada en un campo de visión de la cámara, preferiblemente en donde la posición predeterminada es el centro del campo de visión de la cámara.
10. Procedimiento según cualquiera de las reivindicaciones 5 a 9, que incluye el uso de parámetros geométricos del dispositivo informático móvil y parámetros de lente de la cámara para estimar el tamaño de la rotura, preferiblemente en donde los parámetros geométricos del dispositivo informático móvil se utilizan para determinar la ángulo de giro entre el dispositivo informático móvil y el panel de acristalamiento.
11. Procedimiento según la reivindicación 10, en donde el procesamiento de la imagen se basa además en parámetros del chip para la cámara y/o el dispositivo informático móvil.
12. Procedimiento según la reivindicación 10 o la reivindicación 11, en donde el procesamiento de la imagen genera un conjunto de puntos de datos que se utilizan para generar un diámetro para la rotura o una zona dentro de la rotura.
ES20201944T 2016-05-13 2017-05-11 Aparato y procedimiento de análisis de roturas Active ES2956878T3 (es)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
GBGB1608455.0A GB201608455D0 (en) 2016-05-13 2016-05-13 Break analysis system, method and device

Publications (1)

Publication Number Publication Date
ES2956878T3 true ES2956878T3 (es) 2023-12-29

Family

ID=56320372

Family Applications (2)

Application Number Title Priority Date Filing Date
ES20201944T Active ES2956878T3 (es) 2016-05-13 2017-05-11 Aparato y procedimiento de análisis de roturas
ES17724410T Active ES2848546T3 (es) 2016-05-13 2017-05-11 Aparato y procedimiento de análisis de roturas

Family Applications After (1)

Application Number Title Priority Date Filing Date
ES17724410T Active ES2848546T3 (es) 2016-05-13 2017-05-11 Aparato y procedimiento de análisis de roturas

Country Status (28)

Country Link
US (3) US10852249B2 (es)
EP (2) EP3455825B1 (es)
JP (1) JP2019518276A (es)
KR (1) KR20190007481A (es)
CN (2) CN109155062A (es)
AR (1) AR108460A1 (es)
AU (2) AU2017263145B2 (es)
BR (1) BR112018072977A2 (es)
CA (1) CA3021030C (es)
DK (2) DK3455825T3 (es)
ES (2) ES2956878T3 (es)
FI (1) FI3783567T3 (es)
GB (3) GB201608455D0 (es)
HR (2) HRP20231169T1 (es)
HU (2) HUE053349T2 (es)
LT (2) LT3783567T (es)
MA (1) MA44971B1 (es)
MX (2) MX2018013704A (es)
PL (2) PL3783567T3 (es)
PT (2) PT3783567T (es)
RS (2) RS61389B1 (es)
RU (1) RU2766420C2 (es)
SG (1) SG11201809865RA (es)
SI (2) SI3783567T1 (es)
TN (1) TN2018000371A1 (es)
TW (2) TWI647443B (es)
WO (1) WO2017194950A1 (es)
ZA (2) ZA201806995B (es)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB201608455D0 (en) 2016-05-13 2016-06-29 Belron Internat Ltd Break analysis system, method and device
GB2585004A (en) 2019-06-24 2020-12-30 Belron Int Ltd Analysis of damage to vehicle glazing panels
CN112784626B (zh) * 2019-11-04 2022-07-01 广东新星源智能信息科技有限公司 基于移动终端的更换需求现场触发装置
CN111762181B (zh) * 2019-11-06 2021-06-04 嵊州市万智网络科技有限公司 汽车事故编号映射系统以及方法
CN110893382B (zh) * 2019-11-09 2020-10-27 嵊州亿源投资管理有限公司 自动化细纹修补系统
CN110907473B (zh) * 2019-11-29 2023-04-07 上海科世达-华阳汽车电器有限公司 光伏组件的检修方法、装置、设备以及存储介质
CN112906688A (zh) * 2019-12-04 2021-06-04 刘志方 基于视觉处理的信息解析平台

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6115118A (en) * 1997-08-25 2000-09-05 Northstar Automotive Glass, Inc. Vehicle windshield scanning system
GB2391784B (en) * 2002-08-02 2005-10-19 Carglass Luxembourg Sarl Zug Windscreen heater device particularly for windscreen repair
GB2415776B (en) * 2004-06-28 2009-01-28 Carglass Luxembourg Sarl Zug Investigation of vehicle glazing panels
US7089099B2 (en) * 2004-07-30 2006-08-08 Automotive Technologies International, Inc. Sensor assemblies
RU2366933C2 (ru) * 2004-12-16 2009-09-10 Вольво Аэро Корпорейшн Способ и устройство для выявления трещин в объекте
BRPI0613097B1 (pt) * 2005-06-30 2019-01-22 Agc Flat Glass Na Inc dispositivo e método de reconhecimento de imagem
US20070067075A1 (en) * 2005-09-16 2007-03-22 Mcmillan Michael W Quick automotive cosmetic repair
US20070245956A1 (en) * 2006-02-23 2007-10-25 Picodeon Ltd Oy Surface treatment technique and surface treatment apparatus associated with ablation technology
US8073196B2 (en) * 2006-10-16 2011-12-06 University Of Southern California Detection and tracking of moving objects from a moving platform in presence of strong parallax
GB2451417A (en) * 2007-04-23 2009-02-04 Carglass Luxembourg Sarl Zug Glazing panel investigation methods and systems
DE102007021181B3 (de) * 2007-05-05 2008-07-03 Dr.Ing.H.C. F. Porsche Ag Verfahren zur Reparatur eines beschädigten Fahrzeug-Trägers, insbesondere eines Seitenschwellers
KR101561913B1 (ko) 2009-04-17 2015-10-20 엘지전자 주식회사 이동 단말기의 영상 표시 방법 및 그 장치
WO2011022490A2 (en) * 2009-08-18 2011-02-24 Serious Materials, Inc. Method and systems for retrofitting glass or insulated glass units of existing curtain wall systems for improved thermal performance
CN104081192B (zh) * 2011-04-21 2017-02-22 艾悌亚信息技术(上海)有限公司 一种对玻璃多层面摄像的摄像装置及其方法
US20140247348A1 (en) * 2013-03-01 2014-09-04 Hertz System, Inc. Virtual rent-a-car system and method with in-car concierge device
JP6238569B2 (ja) * 2013-05-22 2017-11-29 キヤノン株式会社 画像処理装置、画像処理方法、及び、プログラム
US9113306B2 (en) * 2013-08-02 2015-08-18 Google Inc. Predictive assistance information
GB2526270B (en) 2014-05-16 2018-08-22 Pre Chasm Res Ltd Examining vehicle glass defects
JP2016095502A (ja) * 2014-11-11 2016-05-26 株式会社半導体エネルギー研究所 表示システム、表示装置
GB201608455D0 (en) 2016-05-13 2016-06-29 Belron Internat Ltd Break analysis system, method and device

Also Published As

Publication number Publication date
TW201740102A (zh) 2017-11-16
GB201707572D0 (en) 2017-06-28
ZA202100372B (en) 2022-10-26
US11385189B2 (en) 2022-07-12
GB2565500A (en) 2019-02-13
EP3455825A1 (en) 2019-03-20
MA44971B1 (fr) 2021-03-31
US20190170662A1 (en) 2019-06-06
KR20190007481A (ko) 2019-01-22
US10852249B2 (en) 2020-12-01
RS61389B1 (sr) 2021-02-26
LT3455825T (lt) 2021-02-25
ES2848546T3 (es) 2021-08-10
EP3783567A1 (en) 2021-02-24
PL3783567T3 (pl) 2023-12-11
TN2018000371A1 (en) 2020-06-15
WO2017194950A1 (en) 2017-11-16
AU2022201019A1 (en) 2022-03-10
CN116205871A (zh) 2023-06-02
MX2018013704A (es) 2019-05-02
AU2017263145B2 (en) 2021-12-23
GB201608455D0 (en) 2016-06-29
TW201839385A (zh) 2018-11-01
US20220326163A1 (en) 2022-10-13
PT3455825T (pt) 2021-02-03
HRP20231169T1 (hr) 2024-01-05
HUE063378T2 (hu) 2024-01-28
US11692949B2 (en) 2023-07-04
LT3783567T (lt) 2023-10-10
CA3021030C (en) 2024-02-27
EP3783567B1 (en) 2023-07-05
AU2022201019B2 (en) 2023-04-13
FI3783567T3 (fi) 2023-09-08
GB2551894A (en) 2018-01-03
PT3783567T (pt) 2023-08-18
HRP20210174T1 (hr) 2021-04-02
GB201819662D0 (en) 2019-01-16
CA3021030A1 (en) 2017-11-16
SG11201809865RA (en) 2018-12-28
MA44971A (fr) 2019-03-20
HUE053349T2 (hu) 2021-06-28
MX2022000529A (es) 2022-02-10
RU2018140338A (ru) 2020-06-15
US20210131979A1 (en) 2021-05-06
AU2017263145A1 (en) 2018-11-08
CN109155062A (zh) 2019-01-04
PL3455825T3 (pl) 2021-07-19
ZA201806995B (en) 2023-09-27
RU2766420C2 (ru) 2022-03-15
DK3783567T3 (da) 2023-09-18
SI3783567T1 (sl) 2023-11-30
RU2018140338A3 (es) 2020-10-26
EP3455825B1 (en) 2020-11-11
BR112018072977A2 (pt) 2019-03-06
SI3455825T1 (sl) 2021-04-30
RS64596B1 (sr) 2023-10-31
DK3455825T3 (da) 2021-02-08
AR108460A1 (es) 2018-08-22
TWI647443B (zh) 2019-01-11
JP2019518276A (ja) 2019-06-27

Similar Documents

Publication Publication Date Title
ES2956878T3 (es) Aparato y procedimiento de análisis de roturas
EP2327055B1 (en) Method of and arrangement for blurring an image
JP6667065B2 (ja) 位置推定装置および位置推定方法
JP6833668B2 (ja) 画像特徴強調装置、路面特徴解析装置、画像特徴強調方法及び路面特徴解析方法
JP6177006B2 (ja) カメラ較正装置、およびカメラ較正方法
JP2009187135A (ja) 車両周辺監視装置、車両、車両周辺監視用プログラム、車両周辺監視方法
ES2369483T3 (es) Dispositivo de medición de la distancia de visibilidad.
CN112634173B (zh) 一种曲面屏图像校正方法及系统
JP2019211223A (ja) 画像処理装置、過積載検出装置、過積載検出システム及びプログラム
JP2010048553A (ja) 複眼測距装置の検査方法およびそれに用いるチャート
US10970592B2 (en) Adhering substance detection apparatus and adhering substance detection method
JP4962852B2 (ja) 形状測定方法および形状測定装置
NZ787611A (en) Break analysis apparatus and method
KR101463906B1 (ko) 영상 부가정보를 이용한 위치보정 방법
JPS6326517A (ja) 絶対車間距離検出方式
KR20190051571A (ko) 차량 주변 모니터링 장치 및 그의 영상 보정 방법
CN106500659B (zh) 水平校准方法、水平校准装置及测距仪