ES2914288T3 - Proceso para la evaluación automática de la calidad de fotografías digitales - Google Patents

Proceso para la evaluación automática de la calidad de fotografías digitales Download PDF

Info

Publication number
ES2914288T3
ES2914288T3 ES19710163T ES19710163T ES2914288T3 ES 2914288 T3 ES2914288 T3 ES 2914288T3 ES 19710163 T ES19710163 T ES 19710163T ES 19710163 T ES19710163 T ES 19710163T ES 2914288 T3 ES2914288 T3 ES 2914288T3
Authority
ES
Spain
Prior art keywords
pixels
photo
photograph
rejected
intensity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
ES19710163T
Other languages
English (en)
Inventor
Andrea Mainetti
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Photosi SpA Unipersonale
Original Assignee
Photosi SpA Unipersonale
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Photosi SpA Unipersonale filed Critical Photosi SpA Unipersonale
Application granted granted Critical
Publication of ES2914288T3 publication Critical patent/ES2914288T3/es
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30168Image quality inspection

Landscapes

  • Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Testing Or Measuring Of Semiconductors Or The Like (AREA)

Abstract

Proceso implementado por ordenador para la evaluación automática de la calidad de una fotografía digital, que comprende la etapa de proporcionar software programado para llevar a cabo las siguientes etapas y para realizarlas a través de dicho software: - convertir la fotografía a escala de grises y calcular el diagrama de intensidad de la fotografía convertida; - identificar un intervalo de intensidad inicial y un intervalo de intensidad final predeterminados del diagrama; - si en el intervalo inicial y/o en el intervalo final hay un porcentaje total de píxeles de la fotografía mayor o igual a un umbral predeterminado, se evalúa el contraste; - si el contraste de la fotografía convertida a escala de grises es menor o igual a un umbral predeterminado, la fotografía se rechaza.

Description

DESCRIPCIÓN
Proceso para la evaluación automática de la calidad de fotografías digitales
[0001] La presente invención se refiere a un proceso para la evaluación automática de la calidad de fotografías digitales.
[0002] Una fotografía digital hace referencia a una imagen estática convertida en formato digital y almacenada en un dispositivo de memoria.
[0003] La llegada de los dispositivos digitales, y la disponibilidad para su uso diario e inmediato por cualquier persona, nos ha dado a cada uno de nosotros la posibilidad de crear un número de fotografías digitales sin precedentes. Es suficiente con pensar primero en la expansión de las cámaras digitales, y ahora de los teléfonos móviles y teléfonos inteligentes, que están casi todos equipados con cámaras, y se han convertido de manera dominante en un objeto personal e inseparable, probablemente destinado a identificar la vida moderna más que cualquier otro.
[0004] Sin embargo, este gran potencial, que es fácilmente disponible, implica que, en la mayoría de los casos, las fotografías se hacen al azar, sin ninguna técnica o criterio, a menudo a través de intentos repetidos y posteriores.
[0005] Aunque este no es el caso, se reconoce que el objetivo final por el cual se hace una fotografía es darle un valor emocional y evocador que deseamos conservar. Inevitablemente, este valor no está presente en todas las fotografías, ya sea cuando se hacen al azar, o cuando se hacen con criterio. Por lo tanto, la tarea posterior de evaluación y selección de las que tengan mayor valor es inherente al gesto de hacer fotografías.
[0006] Cuanto mayor sea el número de fotografías realizadas, mayor será la tarea de selección que se deba realizar.
[0007] Se ha consolidado que, de entrada, la mayoría de la gente no se molesta con el proceso de evaluación, lo que deriva, por lo tanto, en que la tarea de hacer fotografías sea un ejercicio inútil, y dejando tras de sí los denominados “cementerios” de fotografías.
[0008] En el campo de los dispositivos digitales, y especialmente los teléfonos inteligentes, se conocen numerosas aplicaciones que permiten catalogar las fotografías, pero no son sistemas de evaluación, sino más bien subdivisiones en categorías, a menudo de libre interpretación.
[0009] Por consiguiente, existe una necesidad latente en el sector de un proceso automático de evaluación y selección de fotografías, que lleve a cabo el rechazo de imágenes de menor valor en sustitución del usuario.
[0010] En la literatura de patente, se conocen los siguientes documentos lejanos: US6535636, WO2016/130853, US2010/054544, WO2006/062969.
[0011] El objeto general de la presente invención es solventar todos o parte de los inconvenientes de la técnica anterior al prever la necesidad latente del sector.
[0012] Un objeto preferido de la presente invención es el de proporcionar un proceso que pueda ser fácilmente implementado en un dispositivo digital mediante software.
[0013] Otro objeto preferido de la presente invención es el de proporcionar un proceso de selección que pueda procesar fácilmente un número elevado de fotografías, como, por ejemplo, todas las fotografías presentes en un dispositivo digital, tal como un teléfono inteligente o una cámara digital, o guardadas en un entorno de memoria predeterminado, tal como un disco duro, una tarjeta SIM o un área de nube privada.
[0014] Según un primer aspecto general, la presente invención se refiere a un proceso para la evaluación automática de la calidad de fotografías digitales, caracterizado por la etapa de proporcionar software programado para llevar a cabo las siguientes etapas y para realizarlas a través de dicho software:
• convertir la fotografía en escala de grises y calcular el diagrama de intensidad de la fotografía convertida;
• identificar un intervalo de intensidad inicial y un intervalo de intensidad final predeterminados del diagrama;
• si en el intervalo inicial y/o en el intervalo final hay un porcentaje total de píxeles de la fotografía mayor o igual a un umbral predeterminado, se evalúa el contraste;
• si el contraste de la fotografía convertida a escala de grises es menor o igual a un umbral predeterminado, la fotografía se rechaza.
[0015] De este modo, resulta ventajosamente posible automatizar el reconocimiento de fotografías sobreexpuestas o subexpuestas y rechazarlas a partir de una selección de fotografías creada durante el proceso.
[0016] Ventajosamente, mediante el software, es posible acceder a un archivo de fotografías digitales y crear un grupo de fotografías seleccionadas en el que se incluyan aquellas que no han sido rechazadas por la evaluación de calidad.
[0017] Según algunas formas de realización preferidas, el contraste de la fotografía convertida a escala de grises se calcula a partir de todos los píxeles de la imagen menos una cantidad predeterminada de los píxeles más claros y/o más oscuros.
[0018] De este modo, los píxeles más claros y más oscuros de la fotografía, que podrían pertenecer a un porcentaje no muy significativo y engañoso de píxeles con respecto al contraste, se rechazan de la evaluación de contraste. Estos píxeles se conocen convencionalmente como “ruido”.
[0019] Preferiblemente, la cantidad de píxeles rechazados en la evaluación de contraste es menor que un porcentaje predeterminado de los píxeles totales de la imagen. De este modo, el número de píxeles que se rechaza es proporcional a las dimensiones de la imagen.
[0020] Según algunos ejemplos prácticos preferidos, el contraste se calcula de la siguiente manera:
- calcular el número de píxeles que se van a rechazar multiplicando el porcentaje predeterminado por los píxeles totales de la fotografía;
- siguiendo el diagrama de intensidad, eliminar los píxeles más oscuros del diagrama empezando por los más oscuros absolutos y procediendo conforme a la escala de intensidad del diagrama hasta alcanzar el número de píxeles anteriormente calculado que se van a rechazar;
- identificar la intensidad del píxel más oscuro absoluto, conforme a la escala de intensidad del diagrama, entre los píxeles restantes;
- siguiendo el diagrama de intensidad, eliminar los píxeles más claros del diagrama empezando por el más claro absoluto y procediendo conforme a la escala de intensidad del diagrama hasta alcanzar el número de píxeles anteriormente calculado que se van a rechazar;
- identificar la intensidad del píxel más claro absoluto, conforme a la escala de intensidad del diagrama, entre los píxeles restantes;
- calcular la diferencia de intensidad entre los píxeles más oscuros y más claros identificados, que se puede realizar, por ejemplo, usando la unidad de medida de la escala de intensidad del diagrama.
[0021] Según una característica general preferible de la invención, esta comprende el siguiente proceso para seleccionar la mejor fotografía entre fotografías similares:
• agrupar las fotografías en grupos similares (p. ej., basándose en la comparación del sujeto con bibliotecas de similitud);
• dentro de cada grupo de similitud, calcular una puntuación para cada fotografía sumando de forma algebraica una pluralidad de valores característicos predeterminados de cada fotografía,
• seleccionar la fotografía con la mayor puntuación y rechazar el resto.
[0022] Preferiblemente, los valores característicos se seleccionan de entre al menos los siguientes: ancho de la fotografía en píxeles, altura de la fotografía en píxeles, sensibilidad ISO, valor de enfoque, valor de zum digital, valor de zum analógico, suma de los porcentajes ocupados por las caras, si las hay. Los valores, según el tipo, pueden extraerse, por ejemplo, de metadatos o calcularse usando bibliotecas de comparación.
[0023] Se asigna preferiblemente una puntuación más alta a las caras de frente y/o con ambos ojos abiertos y/o con una sonrisa, si la hay.
[0024] Según una característica general preferible de la invención, esta comprende el siguiente proceso para evaluar el tamaño en kilobyte (KB) o el número de píxeles de la fotografía:
• si el peso en KB es menor o igual a un valor de umbral predeterminado y/o el número de píxeles es menor o igual a un valor de umbral predeterminado, la fotografía es rechazada.
[0025] Según una característica general preferible de la invención, esta comprende el siguiente proceso para evaluar el valor ISO:
• si el valor ISO está fuera de un intervalo predeterminado de valores, la fotografía se rechaza.
[0026] Según una característica general preferible de la invención, esta comprende el siguiente proceso para evaluar la difuminación en escala de grises:
• la fotografía se convierte a escala de grises
• si la fotografía presenta al menos una cara: se determina el porcentaje de área ocupada por los rectángulos de las caras en la fotografía y se establece un umbral límite de difuminación proporcional al tamaño de los rectángulos; si todas las caras tienen una difuminación mayor o igual al umbral límite, la fotografía se rechaza;
• si la fotografía no presenta ninguna cara, se determina la difuminación global de la fotografía con respecto a un umbral predeterminado, si la difuminación global es mayor o igual al umbral predeterminado, la fotografía se rechaza.
[0027] Los rectángulos, por ejemplo, son los rectángulos más pequeños en los que se puede inscribir una cara y/o se determinan mediante una biblioteca.
[0028] Según algunas formas de realización preferidas, se aplican al menos dos criterios de evaluación de los que se indican arriba, incluyendo el de evaluar la exposición y el contraste, que se aplica a las fotografías no rechazadas por el otro criterio u otros criterios. En general, los criterios de evaluación de contraste/exposición y/o el criterio de difuminación y/o el criterio de selección de la mejor fotografía entre fotografías similares se aplican después de al menos otro criterio de evaluación y solo a las fotografías no rechazadas por dicho criterio previo.
[0029] Preferiblemente, sea cual sea el número y tipo de criterios adoptados, estos se aplican sucesivamente entre sí para evaluar solo las fotografías no rechazadas por los criterios aplicados anteriormente. Preferiblemente, los criterios de evaluación de exposición y contraste se aplican después de al menos otro criterio.
[0030] Según una característica general de esta, la invención se refiere a un producto de programa informático que comprende instrucciones que, cuando el programa es ejecutado por un ordenador, provocan que el ordenador realice cualquiera de los procesos anteriormente mencionados.
[0031] Otras características y ventajas de la presente invención quedarán más claras a partir de la siguiente descripción detallada de las formas de realización preferidas de esta, en referencia a los dibujos adjuntos y proporcionados a modo de ejemplo indicativo y no limitativo. En dichos dibujos:
- la figura 1 representa un diagrama de bloques de un proceso implementado mediante una aplicación de software de acuerdo con la presente invención;
- la figura 2 representa una fotografía oscura que es rechazada por el proceso de acuerdo con la invención, y la figura 3 representa el diagrama de intensidad de la fotografía de la figura 2 convertida en escala de grises; y
- la figura 4 representa una fotografía oscura que es seleccionada por el proceso de acuerdo con la invención al presentar suficiente contraste, y la figura 5 representa el diagrama de intensidad de la fotografía 4 convertida en escala de grises.
[0032] En referencia a la figura 1, se representa un proceso, que puede implementarse automáticamente mediante una aplicación de software, para crear e imprimir, y/o archivar, una historia representada por una secuencia de fotografías digitales tomadas de un archivo.
[0033] El archivo digital es, por ejemplo, la memoria de un teléfono inteligente, y contiene muchas fotografías. La mayoría de estas no son probablemente adecuadas para imprimir, y por lo tanto el primer requisito es rechazar las que no son adecuadas.
[0034] Para tal fin, la aplicación accede al archivo y realiza la primera evaluación de calidad de las fotografías, indicada de manera global con el número de referencia 5. La evaluación se puede llevar a cabo, por ejemplo, a través de uno o más de los siguientes criterios, en la misma secuencia ilustrada, o en una secuencia distinta:
a) criterio de evaluación del peso y/o tamaño de fotografías: si el tamaño (o peso) en KB es menor o igual a un valor de umbral predeterminado y/o el número de píxeles es menor o igual aun valor de umbral predeterminado, la fotografía es rechazada;
b) criterio de evaluación del valor ISO: si este está fuera de un intervalo predeterminado de valores, la fotografía se rechaza;
c) criterio de evaluación de exposición y contraste en escala de grises:
• La fotografía se convierte en escala de grises y se calcula el diagrama de intensidad de la fotografía convertida en escala de grises;
• En general, la escala de grises va de negro a blanco, y es preferiblemente una escala de tipo estándar, p. ej., una escala en 256 niveles de gris (cada nivel corresponde a una intensidad de gris).
• Se identifica un intervalo de intensidad inicial y un intervalo de intensidad final predeterminados del diagrama. Por lo tanto, estos intervalos comprenden los niveles de gris más oscuros y más claros de la escala. Preferiblemente, los intervalos empiezan y terminan en los extremos del diagrama.
• Si en el intervalo inicial y/o en el intervalo final hay un porcentaje total de píxeles de la fotografía mayor o igual a un umbral predeterminado, se evalúa el contraste. De hecho, estas fotografías pueden estar sobreexpuestas o subexpuestas, es decir, ser demasiado claras o demasiado oscuras, pero también podrían ser fotografías hechas durante la noche o fotografías a plena luz expuestas correctamente y, por lo tanto, se necesita un proceso automático para establecer su condición.
• Si el contraste de la fotografía convertida a escala de grises es menor o igual a un umbral predeterminado, la fotografía se rechaza. Se observa que el contraste considerado preferentemente se calcula a partir de todos los píxeles de la imagen menos una cantidad predeterminada de los píxeles más claros y/o más oscuros. Un contraste calculado como la diferencia entre la intensidad de los píxeles más claros y la intensidad de los píxeles más oscuros de entre todos los píxeles podría provocar, de hecho, un error en el que no hay un número muy significativo de píxeles muy claros ni muy oscuros, conocidos como “ruido”. El hecho de rechazar una cantidad predeterminada de píxeles más claros y más oscuros de la evaluación permite la eliminación del ruido. En concreto, se rechaza una cantidad equivalente a un porcentaje predeterminado de píxeles totales de la imagen a partir de la evaluación del contraste.
[0035] En referencia a las figuras 2 y 3, se proporciona un ejemplo específico de la evaluación de una fotografía oscura que es rechazada por el proceso de acuerdo con la invención. La fotografía es un paisaje nocturno.
[0036] La evaluación comienza convirtiendo la imagen de la figura 2 a escala de grises, donde la escala es de tipo estándar y contiene 256 niveles de gris.
[0037] La evaluación procede calculando, para la fotografía convertida a escala de grises, cuántos píxeles son más oscuros que un umbral predeterminado, en concreto como porcentaje de píxeles, de los píxeles totales de la imagen, y más oscuros que un nivel de umbral de gris predeterminado.
[0038] Esto se puede realizar, por ejemplo, construyendo un diagrama, preferiblemente en forma de histograma, de la imagen en escala de grises, representado en la figura 3.
[0039] El diagrama muestra en el eje horizontal los 256 niveles de gris, y en el eje vertical el número de píxeles (o el porcentaje de píxeles totales) presentes en la fotografía para cada nivel de gris.
[0040] Los niveles de la escala de grises se dividen en cinco intervalos de valores, indicados mediante los números 12, 14, 16, 18, 20, comprendidos entre 0 (negro) y 255 (blanco).
[0041] Los píxeles más oscuros son aquellos que tienen valores de intensidad que se encuentran dentro de los primeros dos intervalos 12 y 14, por lo tanto, valores comprendidos entre 0 y 101. Dicho de otro modo, el nivel de gris umbral aquí es el nivel S1=101, que constituye el límite superior del intervalo 14.
[0042] En el ejemplo, el 98,8 % de los píxeles totales de la fotografía se encuentran dentro de los intervalos 12 y 14.
[0043] Si este intervalo supera un valor de umbral predeterminado, es necesario proceder a evaluar el contraste de la fotografía. Para este ejemplo, se utiliza el siguiente valor de umbral predeterminado: parámetro 1 = 75 %, por lo tanto, la fotografía está potencialmente subexpuesta y la evaluación se lleva a cabo con las siguientes etapas.
[0044] La imagen contiene tanto al menos un píxel blanco como al menos un píxel negro, en concreto, 8 píxeles blancos y 14072 píxeles negros, por lo tanto, el valor de contraste absoluto sería la diferencia entre el valor de intensidad del negro y del blanco, es decir, 255-0=255. Sin embargo, la percepción del ojo humano es que la fotografía presenta un contraste definitivamente inferior.
[0045] Para eliminar el “ruido”, el contraste de los píxeles más oscuros y más claros se elimina del cálculo en una medida determinada por un valor de umbral predeterminado; en el ejemplo, se utiliza el parámetro 2 = 2 %. La imagen tiene 12080256 píxeles y el 2 % equivale a 241605 píxeles. Por un lado, buscamos en el histograma el valor de intensidad más pequeño, para el que hay al menos 241605 píxeles más oscuros. En nuestro caso, este es el valor de intensidad 2, muy cercano al negro. Del mismo modo, buscamos en el histograma el valor de intensidad más elevado, para el que hay al menos 241605 píxeles más claros. En nuestro caso, este es el valor de intensidad 42, que es también un valor bastante oscuro. Por lo tanto, el contraste neto del ruido, más en consonancia con el contraste percibido por el ojo humano, es igual a 40. Si este valor es inferior a un umbral predeterminado, entonces la fotografía está sobreexpuesta y se rechaza. En el ejemplo, se utiliza como valor de umbral de contraste el parámetro 3 = 125, por lo tanto, la fotografía en cuestión se rechaza.
[0046] En referencia a la figura 4, se muestra una fotografía que representa una obra de arte en un ambiente oscuro, iluminado por una fuente dentro de la propia obra. La fotografía tiene las mismas dimensiones que la anterior.
[0047] Al adoptar el mismo proceso y los mismos parámetros que la fotografía de la figura 2, se obtiene el histograma de la fotografía de la figura 5 convertida a escala de grises.
[0048] En concreto, el 94,8 % de los píxeles se encuadran dentro de los dos primeros intervalos 12 y 14 y, por lo tanto, la fotografía está potencialmente subexpuesta.
[0049] No obstante, excluido el ruido determinado a través del parámetro 2, el valor de intensidad mínimo es igual a 1, mientras que el valor de intensidad máximo es igual a 169 y, por lo tanto, el contraste percibido, igual a 168, es lo suficientemente alto (>= parámetro_3) y la fotografía no se rechaza.
[0050] El mismo proceso tiene lugar para las fotografías potencialmente sobreexpuestas (muy claras), es decir, aquellas en las que el porcentaje de píxeles tiene un valor de intensidad mayor que un nivel de umbral predeterminado (>= parámetro_1). Este porcentaje es, por ejemplo, el que se encuentra dentro de los dos últimos intervalos (18, 20) y, por lo tanto, el valor de umbral de intensidad de sobreexposición potencial es el extremo inferior S2=152 del intervalo 18.
[0051] En resumen, generalmente, en la evaluación se usan los siguientes parámetros:
parámetro_1: p. ej., 75 % (umbral de sobreexposición y/o subexposición potencial)
parámetro_2: p. ej., 2 % (umbral de rechazo de píxeles que no se encuentran dentro del cálculo de contraste) parámetro_3: p. ej., 125 (umbral de contraste neto de ruido)
d) criterio de evaluación de difuminación. Un criterio preferido es el siguiente:
• la fotografía se convierte a escala de grises y se realiza preferiblemente una ecualización, p. ej., conforme a un proceso estándar conocido;
• las caras de frente y de perfil en la fotografía convertida a escala de grises y ecualizada se detectan utilizando la comparación con una biblioteca, p. ej., el conocido software de código abierto "OPENCV". Las detecciones tienen lugar preferiblemente tanto en la imagen con la orientación original como en la imagen girada según al menos una segunda orientación, p. ej., según una o más de: girada 90° a la izquierda, girada 90° a la derecha, y girada 180°. Se identifican preferiblemente tanto la presencia de los ojos (uno o ambos) como la sonrisa.
• Si la fotografía tiene al menos una cara: se determina el porcentaje de área ocupada por los rectángulos de las caras en la fotografía. Se establece un umbral de límite de difuminación, proporcional al tamaño de los rectángulos. Si todas las caras tienen una difuminación mayor o igual a su propio umbral de límite, la imagen se rechaza. Los rectángulos, por ejemplo, son los rectángulos más pequeños en los que se puede inscribir una cara y/o se determinan mediante una biblioteca.
• Si la fotografía no presenta ninguna cara, se determina la difuminación global de la fotografía con respecto a un umbral predeterminado, si la difuminación global es mayor o igual al valor de umbral predeterminado, la fotografía se rechaza.
e) Criterio para la elección de la mejor fotografía de entre fotografías similares. Casi con seguridad, habrá presentes en el archivo fotografías tomadas del mismo sujeto en sucesivos intentos, con la intención de tener al menos una fotografía de calidad. Por lo tanto, resulta necesario seleccionar automáticamente “solo una de estas fotografías”, evidentemente, la mejor. Esto puede llevarse a cabo de la siguiente manera:
• La aplicación inicialmente agrupa las fotografías en grupos de similitud (es decir, fotografías con un sujeto similar).
• Para establecer la similitud de las fotografías, la aplicación preferiblemente las compara utilizando bibliotecas, p. ej., utilizando un algoritmo conocido, p. ej., un algoritmo que pertenece a la conocida biblioteca de código abierto OPENCV.
• Preferiblemente, una fotografía que está siendo evaluada se incluye en un grupo de similitud si fue tomada por un dispositivo de la misma marca y modelo que las otras fotografías del grupo “y” si fue tomada dentro de un límite de tiempo predeterminado por la última fotografía incluida en el grupo.
• Si una fotografía no puede incluirse en un grupo de similitud ya creado, o si no existen todavía suficientes grupos de similitud, esta se incluye en un nuevo grupo de similitud.
• Cuando no hay más fotografías similares para incluir en un grupo que cumplan el requisito de que se hayan tomado dentro del límite de tiempo, el grupo se cierra, es decir, no se incluyen más fotografías.
• Dentro de cada grupo de similitud cerrado, se selecciona la fotografía con la mayor puntuación de calidad, y el resto se rechaza. La puntuación de calidad puede calcularse preferentemente para cada fotografía de la siguiente manera: para cada fotografía, la aplicación suma de forma algebraica una pluralidad de valores característicos predeterminados de esta, donde los valores se seleccionan preferentemente de entre: ancho de la fotografía en píxeles, altura de la fotografía en píxeles, sensibilidad ISO, valor de enfoque, valor de zum digital, valor de zum analógico, suma de los porcentajes ocupados por caras, si las hay (preferiblemente, se asigna un mayor porcentaje a las caras vistas de frente con los dos ojos, o con los dos ojos abiertos, o con una sonrisa). El enfoque puede calcularse, por ejemplo, mediante bibliotecas conocidas. De acuerdo con formas de realización más simples, los valores se seleccionan únicamente de los metadatos disponibles.
• Algunos de estos valores se obtienen a partir de evaluaciones previas, otros están presentes en los metadatos de cada fotografía. Preferiblemente, la aplicación es capaz de evaluar los metadatos de los tipos más comunes, es decir, metadatos de tipo EXIF, pero no se excluye que se evalúen metadatos alternativos, como, por ejemplo, XMP o similares.
[0052] Si la fotografía no es rechazada por al menos uno de los criterios anteriores adoptados, esta asume el estado de fotografía seleccionada y se utiliza en el posterior algoritmo de creación de historias, indicado en conjunto con el número de referencia 10 en la figura 1.
[0053] Por ejemplo, las fotografías no rechazadas mediante la evaluación de calidad 5 se incluyen en un grupo o en un archivo nuevo al que accede el algoritmo de creación de historias.
[0054] El algoritmo puede crear una o más historias a partir de las fotografías seleccionadas a través de uno o más criterios. Los criterios preferidos son los siguientes:
[0055] f) CRITERIO DE VACACIONES - Estadísticamente, las principales historias que se quieren recordar son aquellas relacionadas con las vacaciones, por lo que existe la necesidad de crear un criterio que las identifique automáticamente. Esto puede llevarse a cabo, por ejemplo, de la siguiente manera:
- la aplicación se programa para establecer preliminarmente una geolocalización de referencia, a la que se hace referencia abajo como la posición “casa”;
- la historia se crea agrupando para formar una historia, es decir, una secuencia de fotografías identificadas como tal, las fotografías seleccionadas en las etapas anteriores que:
• fueron tomadas a una distancia espacial de la posición “casa” mayor o igual a una distancia predeterminada; y • fueron tomadas en una secuencia temporal entre sí durante un marco de tiempo en el que no hay fotografías tomadas a una distancia menor o igual a la distancia predeterminada desde la posición “casa”;
• Otra condición preferible, pero no obligatoria, para la inclusión en la historia puede ser la de haber sido tomada mediante el mismo dispositivo; esto evita, por ejemplo, que se incluyan en la historia fotografías no relacionadas, como aquellas procedentes de aplicaciones sociales como Whatsapp y Facebook o descargadas de internet. Además, o alternativamente, el software puede incluir las fotografías en una misma secuencia si tienen una geolocalización que indique que fueron tomadas dentro de una distancia espacial predeterminada con respecto a al menos una fotografía ya incluida en dicha secuencia que presenta, a su vez, una geolocalización. Esto se puede realizar, por ejemplo, leyendo la geolocalización de las fotografías a partir de los metadatos. Cuando el criterio de distancia se aplica junto con el criterio de toma de fotografías desde el mismo dispositivo, se evita que se agrupen en la misma secuencia fotografías hechas desde el mismo dispositivo pero en lugares muy lejanos entre sí y que, por lo tanto, probablemente no pertenezcan a las mismas vacaciones. En cambio, cuando se aplica el segundo criterio sin aplicar el primero, se permite que las fotografías de las mismas vacaciones tomadas en lugares cercanos con distintos dispositivos se agrupen en la misma secuencia. Los dos criterios pueden refinarse más considerando como condición de inclusión adicional de las fotografías en la misma secuencia que hayan sido tomadas dentro de una distancia de tiempo desde al menos una fotografía ya incluida en la secuencia menor o igual a un tiempo predeterminado.
[0056] Si la al menos una secuencia resultante tiene un número de fotografías que es mayor o igual a un número mínimo predeterminado de fotografías, la secuencia se identifica definitivamente como una historia, y la aplicación está preferentemente adaptada para ordenar la impresión de dicha secuencia de fotografías.
[0057] Preferentemente, la aplicación para de añadir fotografías a la secuencia de una historia cuando se produce una de las siguientes condiciones:
• la secuencia ha alcanzado un número máximo de fotografías permitido por la aplicación; no se excluye que el número máximo coincida con el número mínimo para reconocer la secuencia como una historia.
• o la fotografía que se tomó en una fecha posterior a la última que se incluye en la secuencia se tomó a una distancia espacial con respecto a la posición “casa” que es menor o igual al valor de umbral. Esta “fotografía de umbral” en concreto identifica que el sujeto ha vuelto a casa y, por lo tanto, define el fin de las vacaciones.
• Otra condición preferible de interrupción de la secuencia podría ser cuando el marco de tiempo durante el cual se tomaron las fotografías de la secuencia ha alcanzado un límite fijo predeterminado permitido por la aplicación. En caso de que el usuario solo haya hecho fotografías fuera de casa y, por lo tanto, no haya “fotografía de umbral”, esto impide que las fotografías de diferentes vacaciones terminen en la secuencia.
[0058] Según un ejemplo preferido, la aplicación empieza una nueva secuencia añadiendo la primera fotografía, en orden de toma de las fotografías, que se hizo a una distancia mayor o igual a la distancia predeterminada con respecto a la posición “casa”. Posteriormente, se evalúa el resto de fotografías en el orden en que se hicieron; por lo tanto, si la que está siendo evaluada sigue cumpliendo los requisitos de distancia espacial, y la secuencia todavía no ha alcanzado el límite máximo de fotografías aceptables, se añade; de lo contrario, se cierra la secuencia, es decir, se concluye la historia sin añadir otras fotografías.
[0059] No obstante, puede suceder que estas reglas acaben interrumpiendo la historia de manera no deseada, especialmente en una parte muy intensa desde el punto de vista fotográfico, definida como una especie de “ impacto” de fotografías, es decir, un período en el que se tomaron muchas fotografías; dicho de otro modo, un período con una elevada “frecuencia de toma”. Este período identifica una parte interesante de la historia y no puede quedar incompleto, por lo tanto, las fotografías que pertenezcan a un período con una frecuencia de toma que sea mayor o igual a un umbral predeterminado se incluyen en la secuencia aunque se supere el número límite de fotografías admisibles.
[0060] El reconocimiento de que las fotografías pertenecen a un “período de elevada frecuencia de toma” puede realizarse comparando el tiempo transcurrido entre la fotografía que se está evaluando y la última fotografía incluida en la secuencia; si es menor o igual a un umbral predeterminado, la fotografía se incluye en la secuencia.
[0061] Cuando se cierra una historia, es posible repetir el algoritmo para crear otros, en los que la historia posterior empezó eligiendo la primera fotografía de entre aquellas no utilizadas en las historias anteriormente seleccionadas con el mismo criterio.
[0062] g) CRITERIO DE GENTE: es posible crear la historia personal de una persona identificando, de entre todas las fotografías que contienen caras, aquellas que pertenezcan a la misma persona. Esto puede realizarse mediante la comparación con una biblioteca, p. ej., la biblioteca de código abierto OPENCV.
[0063] Preferiblemente, este criterio también puede incluir en sus secuencias fotografías incluidas en secuencias creadas con otros criterios, tales como el criterio anterior.
[0064] h) CRITERIO DE FRECUENCIA DE TOMA: Las fotografías que no pertenezcan a las vacaciones, al no haberse realizado lejos de casa, pero sí pertenezcan a acontecimientos particularmente significativos, se incluirán casi con total seguridad en el archivo. Es posible agruparlas en una historia reconociéndolas en función de la frecuencia de toma. En concreto, si es un marco de tiempo preferiblemente predefinido hay un número de fotografías mayor o igual a un umbral de límite “y” tomadas a una distancia con respecto a la posición “casa” menor o igual a un valor de umbral, estas se agrupan en una secuencia que representa una historia.
[0065] i) CRITERIO DE VIDA GENERAL: todas las fotografías que fueron incluidas en la secuencia de una historia mediante al menos uno de los criterios anteriores que fue adoptado, preferiblemente el criterio de vacaciones, pueden incluirse en una secuencia de historia general, que termina cuando se alcanza un número límite predeterminado de fotografías o un marco de tiempo predeterminado durante el cual se hicieron las fotografías.
[0066] Según una característica general preferible de la invención, se puede incluir la misma fotografía en numerosas secuencias obtenidas con distintos criterios; no obstante, lo contrario, aunque es un caso menos preferido, no se excluye, donde las fotografías se incluyen solo en otro tipo de secuencia, no incluidas todavía en otra secuencia.
[0067] Según otra característica general preferible, es posible repetir un mismo criterio para crear más secuencias, en cuyo caso se contempla, al menos para uno o más criterios, tales como el criterio para secuencias de vacaciones, que las fotografías de las nuevas secuencias que pertenecen al mismo criterio se incluyan únicamente si no se han incluido ya en otra secuencia generada con el mismo criterio.
[0068] Por ejemplo, esto es factible al contemplar que un criterio predeterminado para la creación de secuencias procesa las fotografías en una secuencia temporal basada en la fecha de toma; por lo tanto, una fotografía ya procesada mediante dicho criterio puede no ser procesada de nuevo según el mismo criterio.
[0069] Según otra característica general preferible de la invención, cada tipo de criterio para la creación de secuencias procesa todas las fotografías en una secuencia temporal basada en la fecha de toma. Esto permite fácilmente incluir la misma fotografía en secuencias obtenidas con diferentes criterios, ya que cada fotografía es evaluada por todos los criterios.
[0070] En general, se observa que la invención también contempla, aunque de manera menos preferida, la posibilidad de que el algoritmo de creación de historias 10 pueda aplicarse independientemente de la evaluación de calidad 5 y, por lo tanto, crear historias seleccionando las fotografías de entre todas las del archivo, o de entre aquellas del archivo evaluadas positivamente con un método distinto al de la evaluación 5.
[0071] En general, los criterios de evaluación de contraste/exposición y/o el criterio de difuminación y/o el criterio de selección de la mejor fotografía entre fotografías similares se aplican después de al menos otro criterio de evaluación de calidad fotográfica y solo a las fotografías no rechazadas por dicho criterio previo.
[0072] En general, la aplicación es capaz de ordenar la impresión y/o permitir el archivo y la recuperación de todas las historias creadas. La impresión consiste, por ejemplo, en poner en orden la conexión a internet a un proveedor de impresión remoto con respecto al dispositivo en el que está instalada la aplicación. El proveedor es, por ejemplo, una industria de impresión de álbumes de fotos.
[0073] Aunque el proceso ha sido descrito en el presente documento en forma de una aplicación de software instalada o instalable en un dispositivo móvil, tal como un teléfono inteligente o una cámara digital, no se excluyen otros tipos de aplicación o software. En general, no se excluye tampoco que el archivo digital al que puede acceder el software esté en una memoria interna del dispositivo de hardware en el que está instalado el software, como, por ejemplo, un disco duro, y/o una memoria externa tal como, por ejemplo, una tarjeta SIM, o un entorno en la nube.
[0074] En general, la escala de grises es cualquier cuantificación de la intensidad de los grises en niveles de gris predeterminados. Los niveles de gris son valores discretos distribuidos en una escala. La escala puede presentar, por ejemplo, 256 niveles de gris, los cuales también pueden denominarse, por lo tanto, intensidades de gris.
[0075] La escala de grises puede hacer referencia, por ejemplo, a la clásica representación binaria de 8 bits para los píxeles, que permite representar 256 niveles de intensidad de gris, incluyendo el negro puro, que generalmente corresponde al nivel 0, y el blanco puro, que generalmente corresponde al nivel 255.

Claims (12)

REIVINDICACIONES
1. Proceso implementado por ordenador para la evaluación automática de la calidad de una fotografía digital, que comprende la etapa de proporcionar software programado para llevar a cabo las siguientes etapas y para realizarlas a través de dicho software:
• convertir la fotografía a escala de grises y calcular el diagrama de intensidad de la fotografía convertida;
• identificar un intervalo de intensidad inicial y un intervalo de intensidad final predeterminados del diagrama;
• si en el intervalo inicial y/o en el intervalo final hay un porcentaje total de píxeles de la fotografía mayor o igual a un umbral predeterminado, se evalúa el contraste;
• si el contraste de la fotografía convertida a escala de grises es menor o igual a un umbral predeterminado, la fotografía se rechaza.
2. Proceso según la reivindicación 1, donde el contraste de la fotografía convertida a escala de grises se calcula a partir de todos los píxeles de la imagen menos una cantidad predeterminada de los píxeles más claros y/o más oscuros.
3. Proceso según la reivindicación 2, donde la cantidad de píxeles rechazados en la evaluación de contraste es un porcentaje predeterminado de los píxeles totales de la imagen.
4. Proceso según la reivindicación 2 o 3, donde el contraste se calcula de la siguiente manera:
- calcular el número de píxeles que se van a rechazar multiplicando el porcentaje predeterminado por los píxeles totales de la fotografía;
- siguiendo el diagrama de intensidad, eliminar los píxeles más oscuros del diagrama empezando por los más oscuros absolutos y procediendo conforme a la escala de intensidad del diagrama hasta alcanzar el número de píxeles anteriormente calculado que se van a rechazar;
- identificar la intensidad del píxel más oscuro, conforme a la escala de intensidad del diagrama, entre los píxeles restantes;
- siguiendo el diagrama de intensidad, eliminar los píxeles más claros del diagrama empezando por los más claros absolutos y procediendo conforme a la escala de intensidad del diagrama hasta alcanzar el número de píxeles anteriormente calculado que se van a rechazar;
- identificar la intensidad del píxel más claro, conforme a la escala de intensidad del diagrama, entre los píxeles restantes;
- calcular la diferencia de intensidad entre el píxel más oscuro y el más claro identificados.
5. Proceso según cualquiera de las reivindicaciones anteriores, donde este comprende al menos el siguiente proceso para seleccionar la mejor fotografía de entre fotografías similares:
• agrupar las fotografías en grupos de similitud;
• dentro de cada grupo de similitud, calcular una puntuación para cada fotografía sumando de forma algebraica una pluralidad de valores característicos predeterminados de esta,
• elegir la fotografía con la puntuación más alta y rechazar el resto.
6. Proceso según la reivindicación anterior, donde los valores característicos se seleccionan de entre al menos los siguientes: ancho de la fotografía en píxeles, altura de la fotografía en píxeles, sensibilidad ISO, valor de enfoque, valor de zum digital, valor de zum analógico, suma de los porcentajes ocupados por las caras, si las hay.
7. Proceso según la reivindicación anterior, donde se asigna una mayor puntuación a las caras vistas de frente y/o con ambos ojos y/o con una sonrisa, si las hay.
8. Proceso según cualquiera de las reivindicaciones anteriores, donde este comprende al menos el siguiente criterio para evaluar el tamaño en kilobyte, KB, y/o el número de píxeles de la fotografía:
• si el tamaño en KB es menor o igual un valor de umbral predeterminado y/o el número de píxeles es menor o igual a un valor de umbral predeterminado, la fotografía es rechazada.
9. Proceso según cualquiera de las reivindicaciones anteriores, donde este comprende al menos el siguiente criterio para evaluar el valor ISO:
• si el valor ISO está fuera de un intervalo predeterminado de valores, la fotografía se rechaza.
10. Proceso según cualquiera de las reivindicaciones anteriores, donde este comprende al menos el siguiente criterio para evaluar la difuminación en escala de grises:
• la fotografía se convierte a escala de grises
• si la fotografía presenta al menos una cara: se determina el porcentaje de área ocupada por los rectángulos de las caras en la fotografía y se establece un umbral límite de difuminación proporcional al tamaño de los rectángulos; si todas las caras tienen una difuminación mayor o igual al umbral límite, la fotografía se rechaza;
• si la fotografía no presenta ninguna cara, se determina la difuminación global de la fotografía con respecto a un umbral predeterminado, si la difuminación global es mayor o igual al umbral predeterminado, la fotografía se rechaza.
11. Proceso según cualquiera de las reivindicaciones 1 a 4, donde al menos un criterio seleccionado de los de las reivindicaciones 5 a 10 se aplica antes del criterio de la reivindicación 1, y el criterio de la reivindicación 1 no considera fotografías ya rechazadas por el criterio anterior.
12. Producto de programa informático que comprende instrucciones que, cuando el programa es ejecutado por un ordenador, provocan que el ordenador lleve a cabo el proceso según cualquiera de las reivindicaciones anteriores.
ES19710163T 2018-03-08 2019-02-22 Proceso para la evaluación automática de la calidad de fotografías digitales Active ES2914288T3 (es)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
IT102018000003384A IT201800003384A1 (it) 2018-03-08 2018-03-08 Procedimento di valutazione automatica della qualità di foto digitali
PCT/IB2019/051454 WO2019171200A1 (en) 2018-03-08 2019-02-22 Process for the automatic evaluation of the quality of digital photographs

Publications (1)

Publication Number Publication Date
ES2914288T3 true ES2914288T3 (es) 2022-06-08

Family

ID=62530329

Family Applications (1)

Application Number Title Priority Date Filing Date
ES19710163T Active ES2914288T3 (es) 2018-03-08 2019-02-22 Proceso para la evaluación automática de la calidad de fotografías digitales

Country Status (5)

Country Link
US (1) US11348219B2 (es)
EP (1) EP3762897B1 (es)
ES (1) ES2914288T3 (es)
IT (1) IT201800003384A1 (es)
WO (1) WO2019171200A1 (es)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IT202000007546A1 (it) 2020-04-08 2021-10-08 Photosi Spa Unipersonale Procedimento di creazione di prodotti caratterizzati da foto stampate, relativo sistema di creazione e relativo programma applicativo di progettazione
CN111563517B (zh) * 2020-04-20 2023-07-04 腾讯科技(深圳)有限公司 图像处理方法、装置、电子设备及存储介质
CN113063793B (zh) * 2021-03-25 2022-01-07 中山大学 一种钛合金表面涂层服役情况的图形化处理分析方法及其应用

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7308126B2 (en) * 1997-08-28 2007-12-11 Icad, Inc. Use of computer-aided detection system outputs in clinical practice
US6535636B1 (en) * 1999-03-23 2003-03-18 Eastman Kodak Company Method for automatically detecting digital images that are undesirable for placing in albums
US6826310B2 (en) * 2001-07-06 2004-11-30 Jasc Software, Inc. Automatic contrast enhancement
US6579239B1 (en) * 2002-04-05 2003-06-17 Ge Medical Systems Global Technology Company, Llc System and method for automatic adjustment of brightness and contrast in images
US7809197B2 (en) * 2004-12-09 2010-10-05 Eastman Kodak Company Method for automatically determining the acceptability of a digital image
US7668388B2 (en) * 2005-03-03 2010-02-23 Mitutoyo Corporation System and method for single image focus assessment
EP2168079B1 (en) * 2007-01-23 2015-01-14 Valeo Schalter und Sensoren GmbH Method and system for universal lane boundary detection
JP5053802B2 (ja) * 2007-11-05 2012-10-24 オリンパス株式会社 信号処理装置及び信号処理プログラム
US8737695B2 (en) * 2008-09-04 2014-05-27 Microsoft Corporation Photography auto-triage
US8515171B2 (en) * 2009-01-09 2013-08-20 Rochester Institute Of Technology Methods for adaptive and progressive gradient-based multi-resolution color image segmentation and systems thereof
US8493500B2 (en) * 2010-10-27 2013-07-23 Apple Inc. Auto exposure blowout prevention
US8632011B2 (en) * 2011-01-18 2014-01-21 Datalogic ADC, Inc. Systems and methods for illuminating a scan volume of an optical code reader
US8760538B2 (en) * 2011-01-21 2014-06-24 Exelis, Inc. Adaptive gain control image processing system and method
US9095273B2 (en) * 2011-09-26 2015-08-04 Sunnybrook Research Institute Systems and methods for automated dynamic contrast enhancement imaging
US10001445B2 (en) * 2011-09-27 2018-06-19 Ring Container Technologies, Llc Vision system
US9704230B2 (en) * 2011-09-30 2017-07-11 Layar B.V. Feedback to user for indicating augmentability of an image
US9691139B2 (en) * 2013-12-07 2017-06-27 Razzor Technologies Adaptive contrast in image processing and display
EP3046319A1 (en) * 2015-01-19 2016-07-20 Thomson Licensing Method for generating an HDR image of a scene based on a tradeoff between brightness distribution and motion
US11449542B2 (en) * 2015-02-11 2022-09-20 AVAST Software s.r.o. Systems and methods for identifying unwanted photos stored on a device
US10375317B2 (en) * 2016-07-07 2019-08-06 Qualcomm Incorporated Low complexity auto-exposure control for computer vision and imaging systems
US10945657B2 (en) * 2017-08-18 2021-03-16 Massachusetts Institute Of Technology Automated surface area assessment for dermatologic lesions
IT201800003385A1 (it) * 2018-03-08 2019-09-08 Photosi Spa Unipersonale Procedimento di selezione automatica di fotografie digitali da un archivio per la creazione automatica di una sequenza di foto che rappresenta una storia emozionale da stampare e/o conservare

Also Published As

Publication number Publication date
US20210042904A1 (en) 2021-02-11
IT201800003384A1 (it) 2019-09-08
WO2019171200A1 (en) 2019-09-12
US11348219B2 (en) 2022-05-31
EP3762897B1 (en) 2022-04-06
EP3762897A1 (en) 2021-01-13

Similar Documents

Publication Publication Date Title
ES2914288T3 (es) Proceso para la evaluación automática de la calidad de fotografías digitales
CN112042178B (zh) 基于主题优先级的图像捕获
CN113766125B (zh) 对焦方法和装置、电子设备、计算机可读存储介质
US8582001B2 (en) Exposure control for high dynamic range image capture
US8902328B2 (en) Method of selecting a subset from an image set for generating high dynamic range image
CN108897786B (zh) 应用程序的推荐方法、装置、存储介质及移动终端
JP5652886B2 (ja) 顔認証装置、認証方法とそのプログラム、情報機器
CN110956679B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN108810406B (zh) 人像光效处理方法、装置、终端及计算机可读存储介质
CN108322651B (zh) 拍摄方法和装置、电子设备、计算机可读存储介质
WO2016188185A1 (zh) 照片处理方法及装置
CN106899800A (zh) 相机对焦的方法、装置及移动终端设备
US9258490B2 (en) Smoothing of ghost maps in a ghost artifact detection method for HDR image creation
JP2017211982A (ja) 顔識別システム及び顔識別方法
US20190260921A1 (en) Setting apparatus, setting method, and storage medium
CN108289176B (zh) 一种拍照搜题方法、搜题装置及终端设备
US11586669B2 (en) Process for the automatic selection of digital photographs from an archive for the automatic creation of a selection of photographs that represents a single holiday
JPWO2016129049A1 (ja) 画像処理装置、画像処理方法および画像処理プログラム
US9888161B2 (en) Generation apparatus and method for evaluation information, electronic device and server
CN109447927B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
JP2004362619A (ja) 虹彩登録装置
JP5818571B2 (ja) 撮像装置、その制御方法、および制御プログラム
JP2008167458A (ja) 撮像装置および方法並びにプログラム
JP2006053854A (ja) 画像処理方法および装置並びにプログラム
JP6663246B2 (ja) 画像処理装置、撮像装置およびこれらの制御方法ならびにプログラム