ES2954444T3 - Determinación del cumplimiento de la colocación de productos - Google Patents

Determinación del cumplimiento de la colocación de productos Download PDF

Info

Publication number
ES2954444T3
ES2954444T3 ES18716049T ES18716049T ES2954444T3 ES 2954444 T3 ES2954444 T3 ES 2954444T3 ES 18716049 T ES18716049 T ES 18716049T ES 18716049 T ES18716049 T ES 18716049T ES 2954444 T3 ES2954444 T3 ES 2954444T3
Authority
ES
Spain
Prior art keywords
product
display shelf
data processing
processing hardware
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
ES18716049T
Other languages
English (en)
Inventor
Ganapa Sashidhara Murthy
Daniel Brian Yousef
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kellanova
Original Assignee
Kellogg Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kellogg Co filed Critical Kellogg Co
Application granted granted Critical
Publication of ES2954444T3 publication Critical patent/ES2954444T3/es
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G06Q10/087—Inventory or stock management, e.g. order filling, procurement or balancing against orders
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G06T7/001—Industrial image inspection using an image reference approach
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G06T2207/30128—Food products
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/24—Aligning, centring, orientation detection or correction of the image
    • G06V10/247—Aligning, centring, orientation detection or correction of the image by affine transforms, e.g. correction due to perspective effects; Quadrilaterals, e.g. trapezoids

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Economics (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Operations Research (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Stacking Of Articles And Auxiliary Devices (AREA)
  • Details Of Garments (AREA)
  • Display Racks (AREA)

Abstract

Un método (600) para el cumplimiento del producto incluye recibir un planograma (500) que define una ubicación representativa (PR) de un producto (12) en un estante de exhibición (200) y recibir al menos una imagen (310) de un dispositivo de imágenes (300).) que tiene un campo de visión (Fv) dispuesto para capturar una superficie superior (212) del estante de exhibición. El método también incluye determinar si el producto se dispone en el estante de exhibición basándose en al menos una imagen. Cuando el producto se dispone en el estante de exhibición, el método incluye determinar una ubicación real (PA) del producto y comparar la ubicación real del producto con la ubicación representativa del producto definida por el planograma. El método incluye además determinar el cumplimiento del planograma (620) basándose en la comparación de la ubicación real del producto con la ubicación representativa del producto y comunicar el cumplimiento del planograma a una red (150). (Traducción automática con Google Translate, sin valor legal)

Description

DESCRIPCIÓN
Determinación del cumplimiento de la colocación de productos
CAMPO TÉCNICO
Esta divulgación se refiere a la gestión del almacenamiento de productos de venta minorista y a la determinación del cumplimiento de la colocación de productos.
ANTECEDENTES
Los minoristas han utilizado durante mucho tiempo diversas técnicas de almacenamiento y estrategias minoristas para atraer consumidores y vender el inventario. Una de estas técnicas es un planograma. Los planogramas son parte integral de la técnica de comercialización actual, ya que un planograma busca optimizar la colocación de los productos y mantener una gestión consciente del inventario. En la industria minorista se utilizan ampliamente los planogramas, tanto en las tiendas pequeñas como en las tiendas grandes. Los planogramas son generalmente diagramas que mapean la disposición de los productos dentro de un espacio comercial. Los minoristas utilizan los planogramas como una herramienta para comprender las ventas de productos y capitalizar los puntos focales visuales de los consumidores. Los planogramas permiten a los minoristas crear un punto focal, comprender un punto focal y, por lo tanto, utilizar un punto focal para aumentar las ventas. Un planograma también proporciona una herramienta analítica con la que los distribuidores de productos pueden evaluar qué productos comercializar y con la que los fabricantes pueden comprender la conveniencia de productos novedosos o antiguos en el mercado. Aunque los sistemas y métodos conocidos de gestión de almacenamiento de productos de venta minorista han demostrado ser aceptables para su propósito previsto, sigue existiendo una necesidad continua de mejora en la técnica pertinente.
Los documentos WO2009/027839 y EP2662831 divulgan disposiciones con cámaras para establecer el cumplimiento de la colocación de los productos en un estante de exhibición.
SUMARIO
Un aspecto de la divulgación proporciona un método para el cumplimiento de la colocación de productos. El método incluye recibir, en un hardware de procesamiento de datos, un planograma que define la colocación representativa de un producto en un estante de exhibición, y recibir en el hardware de procesamiento de datos al menos una imagen de un dispositivo de obtención de imágenes que tiene un campo de visión dispuesto para capturar una superficie superior del estante de exhibición. El método también incluye determinar, mediante el hardware de procesamiento de datos, si el producto está dispuesto en el estante de exhibición en función de la al menos una imagen. Cuando el producto está dispuesto en el estante de exhibición, el método incluye determinar, mediante el hardware de procesamiento de datos, la colocación real del producto en el estante de exhibición, y comparar mediante el hardware de procesamiento de datos dicha colocación real del producto con la colocación representativa del producto definida por el planograma. El método incluye además determinar, mediante el hardware de procesamiento de datos, el cumplimiento del planograma en función de la comparación de la colocación real del producto con la colocación representativa del producto, y comunicar a una red el cumplimiento del planograma mediante el hardware de procesamiento de datos.
Las implementaciones de la divulgación pueden incluir una o más de las siguientes características opcionales. En algunas implementaciones, cuando el producto no está dispuesto en el estante de exhibición, el método incluye determinar que el estado de existencias del producto es un estado agotado, mediante el hardware de procesamiento de datos. Cuando el producto está dispuesto en el estante de exhibición, el método puede incluir determinar que el estado de existencias del producto es un estado disponible, mediante el hardware de procesamiento de datos. El método también puede incluir comunicar a la red, mediante el hardware de procesamiento de datos, el estado de existencias del producto.
Cuando el producto está dispuesto en el estante de exhibición, el método puede incluir determinar, mediante el hardware de procesamiento de datos, la cantidad de producto en el estante de exhibición, y comunicar a la red la cantidad de producto mediante el hardware de procesamiento de datos. El método también puede incluir comunicar a la red la colocación real del producto, mediante el hardware de procesamiento de datos. La superficie superior del estante de exhibición puede definir un patrón de características, representando la al menos una imagen al menos una parte de la superficie superior del estante de exhibición. Determinar si el producto está dispuesto en el estante de exhibición puede incluir determinar la cantidad de características expuestas en la superficie superior del estante de exhibición capturada en la al menos una imagen. Determinar la colocación real del producto en el estante de exhibición puede incluir identificar unas correspondientes ubicaciones de las características expuestas en la superficie superior del estante de exhibición capturada en la al menos una imagen.
En algunos ejemplos, el método incluye detectar, mediante el hardware de procesamiento de datos, los bordes de las características expuestas en la al menos una imagen, y aproximar, mediante el hardware de procesamiento de datos, las características expuestas en función de los bordes detectados de las características expuestas. El método también puede incluir comparar, mediante el hardware de procesamiento de datos, las características expuestas aproximadas con el patrón de características, y determinar, mediante el hardware de procesamiento de datos, si las características expuestas aproximadas corresponden a las características reales de las características del patrón. Para cada característica expuesta aproximada, cuando la característica expuesta aproximada corresponda a una característica real respectiva del patrón de características, el método puede incluir incrementar, mediante el hardware de procesamiento de datos, un recuento de la cantidad de características expuestas e identificar, mediante el procesamiento de datos hardware, la correspondiente colocación de la característica real dentro del patrón de características. Al menos una característica puede definir una forma poligonal. El método puede incluir además ejecutar, mediante el hardware de procesamiento de datos, una rutina de corrección de imagen en la al menos una imagen, corrigiendo la rutina de corrección de imagen al menos la distorsión esferoide en la al menos una imagen.
Otro aspecto de la divulgación proporciona un sistema que incluye un hardware de procesamiento de datos y un hardware de memoria que se comunica con el hardware de procesamiento de datos. El hardware de memoria almacena instrucciones que, cuando se ejecutan mediante el hardware de procesamiento de datos, hacen que el hardware de procesamiento de datos lleve a cabo ciertas operaciones. Las operaciones incluyen recibir un planograma que define la colocación representativa de un producto en un estante de exhibición, recibir al menos una imagen desde un dispositivo de obtención de imágenes que cuenta con un campo de visión dispuesto para capturar una superficie superior del estante de exhibición, y determinar si el producto está dispuesto en el estante de exhibición en función de la al menos una imagen. Cuando el producto está dispuesto en el estante de exhibición, las operaciones incluyen determinar la colocación real del producto en el estante de exhibición y comparar la colocación real del producto con la colocación representativa del producto definida por el planograma. Las operaciones incluyen además determinar el cumplimiento del planograma en función de la comparación de la colocación real del producto con la colocación representativa del producto, y comunicar a una red el cumplimiento del planograma mediante el hardware de procesamiento de datos.
Este aspecto puede incluir una o más de las siguientes características opcionales. En algunas implementaciones las operaciones incluyen, cuando el producto no está dispuesto en el estante de exhibición, determinar que el estado de existencias del producto es un estado agotado, cuando el producto está dispuesto en el estante de exhibición, determinar que el estado de existencias del producto es un estado disponible, y comunicar a la red el estado de existencias del producto mediante el hardware de procesamiento de datos. Cuando el producto está dispuesto en el estante de exhibición, las operaciones incluyen determinar la cantidad de producto en el estante de exhibición y comunicar la cantidad de producto a la red.
En algunos ejemplos, las operaciones incluyen comunicar a la red la colocación real del producto mediante el hardware de procesamiento de datos. La superficie superior del estante de exhibición puede definir un patrón de características, representando la al menos una imagen al menos una parte de la superficie superior del estante de exhibición. Determinar si el producto está dispuesto en el estante de exhibición puede incluir determinar la cantidad de características expuestas en la superficie superior del estante de exhibición capturada en la al menos una imagen. Determinar la colocación real del producto en el estante de exhibición también puede incluir identificar unas correspondientes ubicaciones de las características expuestas en la superficie superior del estante de exhibición capturada en la al menos una imagen.
En algunas implementaciones, las operaciones incluyen la detección de bordes de las características expuestas en la al menos una imagen y la aproximación de las características expuestas en función de los bordes detectados de las características expuestas. Las operaciones también pueden incluir comparar las características expuestas aproximadas con el patrón de características y determinar si las características expuestas aproximadas corresponden a las características reales de las características del patrón. Para cada característica expuesta aproximada, cuando la característica expuesta aproximada pueda corresponder a una característica real respectiva del patrón de características, las operaciones incluyen incrementar un recuento de la cantidad de características expuestas e identificar la correspondiente ubicación de la característica real dentro del patrón de características. Al menos una característica puede definir una forma poligonal. En algunos ejemplos, las operaciones incluyen ejecutar una rutina de corrección de imagen en la al menos una imagen, corrigiendo la rutina de corrección de imagen al menos la distorsión esferoide de la al menos una imagen.
Los detalles de una o más implementaciones de la divulgación se exponen en los dibujos adjuntos y en la siguiente descripción. Otros aspectos, características y ventajas serán evidentes a partir de la descripción, los dibujos y las reivindicaciones.
DESCRIPCIÓN DE LOS DIBUJOS
La FIG. 1 es una vista esquemática de un entorno de estantes de exhibición ilustrativo.
La FIG. 2 es una vista en perspectiva de un estante de exhibición ilustrativo.
La FIG. 3A es una vista en perspectiva de una imagen ilustrativa con distorsión esferoide del estante de exhibición de la FIG. 2, captada por un dispositivo de obtención de imágenes.
La FIG. 3B es una vista en perspectiva de la imagen de la FIG. 3A tras una rutina de corrección de imagen.
Las FIGS. 4A-4D son vistas superiores de estantes de exhibición ilustrativos con productos en los mismos.
La FIG. 5 es una vista en perspectiva de un planograma de venta minorista ilustrativo.
Las FIGS. 6A y 6B son ejemplos de disposiciones de diagramas de flujo de operaciones para métodos de detección de productos y/o de cumplimiento del planograma.
La FIG. 7 es una vista esquemática de un dispositivo informático ilustrativo que puede usarse para implementar los sistemas y métodos descritos en el presente documento.
Los símbolos de referencia similares en los diversos dibujos indican elementos similares.
DESCRIPCIÓN DETALLADA
Para almacenar y gestionar el inventario, los minoristas suelen utilizar un entorno de estantes de exhibición. El entorno de estantes de exhibición puede contener cualquier número de estantes con productos dispuestos en los mismos, a menudo de acuerdo con un planograma. Sin embargo, con el tiempo, los clientes u otras personas que visiten el espacio de venta minorista pueden mover o cambiar la posición de los productos con respecto a la colocación representativa de los mismos de acuerdo con el planograma. Debido a que un planograma es una herramienta importante creada para tratar de capitalizar y dar forma a la toma de decisiones de los consumidores en la tienda, la disposición de los productos representada en el planograma deberá reflejar la colocación real de los productos por parte del minorista. La presente divulgación proporciona sistemas y métodos para detectar la colocación de productos en un estante de exhibición, y para proporcionar información de cumplimiento de la colocación de los productos.
La FIG. 1 ilustra un usuario 10 en un entorno 100 de estantes de exhibición ilustrativo, interaccionando con un estante 200 de exhibición. El entorno 100 de estantes de exhibición incluye un dispositivo 300 de obtención de imágenes que tiene un campo de visión Fv , 300 para capturar el estante 200 de exhibición. El usuario 10 puede seleccionar un producto 12 del estante 200 de exhibición. El usuario 10 puede ser un consumidor, tal como un cliente de una tienda de alimentos, que retire el producto 12 del estante 200 de exhibición para comprar, apartar, inspeccionar o manipular el producto 12. Adicional o alternativamente, el usuario 10 puede ser un empleado de venta minorista o un representante de distribución que coloque el producto 12 en el estante 200 de exhibición para reponer el producto 12. El producto 12 puede disponerse en el estante 200 de exhibición de acuerdo con un planograma 500 (por ejemplo, FIG. 5). Generalmente, un planograma 500 es un diagrama que identifica la colocación representativa, Pr , del producto 12 a exhibir en el estante 200 de exhibición.
En algunas implementaciones, el entorno 100 de estantes de exhibición incluye una pantalla 110 de visualización dispuesta en el estante 200 de exhibición. La pantalla 110 de visualización puede mostrar contenido multimedia 112, tal como anuncios relacionados con el producto 12, anuncios relacionados con el fabricante del producto 12 o anuncios relacionados con una tienda minorista que venda el producto 12. El contenido multimedia 112 puede estar relacionado con el estado S de existencias del producto 12. Por ejemplo, si hay más existencias de un tipo de producto 12 en el estante 200 de exhibición que de otro producto presente en el estante 200 de exhibición, el contenido multimedia 112 anunciará el tipo de producto 12 del que hay más existencias. Adicional o alternativamente, el contenido multimedia 112 anunciará el tipo de producto 12 del que hay menos existencias para tratar de captar el interés del usuario 10. En algunos ejemplos, la pantalla 110 de visualización está dispuesta sobre el estante 200 de exhibición de manera que la pantalla 110 de visualización represente el contenido multimedia 112 dentro de un campo de visión Fv del usuario 10. A modo de ejemplo, la pantalla 110 de visualización está al nivel visual Le del usuario 10. Adicional o alternativamente, el entorno 100 de estantes de exhibición incluye más de una pantalla 110 de visualización de tal manera que el usuario 10 pueda utilizar una de las más de una pantalla 110 de visualización como pantalla de monitoreo de productos. Por ejemplo, el dispositivo 300 de obtención de imágenes proporciona a la pantalla de monitoreo de productos una transmisión a tiempo real desde el dispositivo 300 de obtención de imágenes, o le proporciona al menos una imagen 310 (por ejemplo, la imagen 310 más reciente).
En algunos ejemplos, el entorno 100 de estantes de exhibición incluye más de un estante 200, 200a-e de exhibición con un dispositivo 300, 300a-e de obtención de imágenes para cada estante 200, 200a-e de exhibición de los más de un estante 200, 200a-e de exhibición. Los más de un estante 200, 200a-e de exhibición pueden formar un expositor para contener más producto 12 y/o para optimizar la colocación real Pa del producto 12. Por ejemplo, el producto 12 del expositor puede incluir más de un tipo de producto 12. Cuando un minorista cuenta con más de un tipo de producto 12, puede interesarle que el tipo de producto 12 más vendido sea más accesible para el usuario 10. Cuando el minorista cuenta con más de un estante 200, 200a-e de exhibición, puede colocar el tipo de producto 12 más vendido en el estante 200, 200a de exhibición o en el estante 200, 200b de exhibición de manera que la colocación real Pa del tipo de producto más vendido esté dentro del campo de visión Fv del usuario 10 (por ejemplo, 200, 200b) o al nivel visual Le del usuario 10 (por ejemplo, 200, 200a).
Con referencia adicional a la FIG. 1, el entorno 100 de estantes de exhibición incluye una fuente 120 de alimentación y un dispositivo informático 130 conectado a una red 150. La fuente 120 de alimentación suministra energía a la electrónica del entorno 100 de estantes de exhibición (por ejemplo, la pantalla 110 de visualización, el dispositivo 300 de obtención de imágenes, el dispositivo informático 130, etc.). La fuente 120 de alimentación puede consistir en una sola unidad o en varias unidades en función del minorista o de la configuración del entorno 100 de estantes de exhibición (por ejemplo, un estante 200 de exhibición o más de un estante 200, 200a-e de exhibición). El dispositivo informático 130 incluye un hardware 132 de procesamiento de datos y un hardware 134 de memoria. El dispositivo informático 130 puede estar conectado a una red 150 a través de un conmutador o rúter 140. El dispositivo informático 130 puede enviar datos de imagen a la red 150 para almacenarlos en un servidor 160 accesible mediante un ordenador remoto 170. El ordenador remoto 170 puede ser un ordenador personal 170, 170a, un ordenador portátil 170, 170b o un dispositivo móvil 170, 170c. Por ejemplo, el usuario 10, que es un distribuidor minorista, puede usar un ordenador remoto 170 para asegurarse de que su entorno 100 de estantes de exhibición cumpla de manera continuada con el planograma 500. Adicional o alternativamente, la red 150 permite que un usuario 10 (p. ej., un distribuidor minorista) alerte a otro usuario 10 (p. ej., un minorista) acerca del cumplimiento del planograma o de otros problemas asociados al producto 12 dentro del entorno 100 de estantes de exhibición. En algunas implementaciones, el dispositivo informático 130 produce un informe de cumplimiento del planograma y luego puede comunicar a la red 150 y/o al servidor 160 el informe de cumplimiento del planograma.
Haciendo referencia a la FIG. 2, el estante 200 de exhibición incluye al menos una base 210 de estante de exhibición para soportar el producto 12. La base 210 de estante de exhibición incluye una superficie superior 212 con un patrón de características 214. El patrón de características 214 está definido por al menos una característica 215. En algunos ejemplos, la al menos una característica 215 define una forma poligonal. Por ejemplo, con respecto a la FIG. 2, la al menos una característica 215 es un triángulo. Adicional o alternativamente, la al menos una característica 215 y la superficie superior 212 presentan un contraste de colores (por ejemplo, blanco y negro, respectivamente). En algunos ejemplos, el estante 200 de exhibición incluye además al menos un lado 200s para contener el producto 12 dentro del estante 200 de exhibición. A modo de ejemplo, la FIG. 2 ilustra un estante 200 de exhibición con una cara posterior 200s 1 y una cara frontal 200s2. El estante 200 de exhibición también puede incluir unos divisores 220 de estante para guiar el producto 12 a la colocación real Pa . En algunas implementaciones, como la de la FIG. 2, los divisores 220 de estante también sirven como caras laterales 220, 200s3-4 para restringir el producto 12.
En algunas implementaciones, un minorista puede personalizar un sistema de estantes para que funcione como el entorno 100 de estantes de exhibición. Por ejemplo, los minoristas suelen utilizar unidades de almacenaje en estantes, tales como góndolas, con estantes de exhibición de tipo tablero perforado y laterales de tipo tablero perforado. Una base de los estantes de exhibición de tipo tablero perforado incluye formas de tablero perforado tales como círculos o polígonos para anclar accesorios. Para personalizar estos sistemas de estantes, puede programarse el dispositivo informático 130 para que reciba las formas de tablero perforado y las interprete como el patrón de características 214.
Con referencia adicional a la FIG. 2, el dispositivo 300 de obtención de imágenes está dispuesto para capturar al menos una parte de la superficie superior 212 del estante 200 de exhibición de modo que el dispositivo 300 de obtención de imágenes capture al menos una parte del patrón de características 214. En algunos ejemplos, como en el de la FIG. 2, el dispositivo 300 de obtención de imágenes está dispuesto encima del estante 200 de exhibición. Por ejemplo, el dispositivo 300 de obtención de imágenes se puede montar en la cara inferior de otro estante 200, 200a de exhibición que esté situado encima del estante 200 de exhibición, en la cara posterior 200s 1 del estante 200 de exhibición, o en cualquier estructura de soporte del estante 200 de exhibición.
Las FIGS. 3A y 3B son ejemplos de al menos una imagen 310 capturada por el dispositivo 300 de obtención de imágenes. El dispositivo 300 de obtención de imágenes puede ser una cámara (por ejemplo, una cámara de vídeo o una cámara fija) o un sensor, o una combinación de una cámara y un sensor. El dispositivo 300 de obtención de imágenes está configurado para capturar la al menos una imagen 310 dentro del campo de visión Fv del dispositivo 300 de obtención de imágenes. En algunos ejemplos, para capturar el estante 200 de exhibición dentro del campo de visión Fv , el dispositivo 300 de obtención de imágenes utiliza una lente gran angular. Como resultado, la al menos una imagen 310 capturada por el dispositivo 300 de obtención de imágenes con la lente gran angular puede presentar una distorsión esferoide Vb. La FIG. 3A proporciona un ejemplo de al menos una imagen 310 que presenta una distorsión esferoide Vb . En algunos ejemplos, el dispositivo informático 130 o el ordenador remoto 170 corrige la distorsión esferoide Vb mediante una rutina de corrección de imagen. La rutina de corrección de imagen puede aplicar un filtro de corrección de la distorsión esferoide a la al menos una imagen 310, para corregir la distorsión esferoide Vb . Mediante la rutina de corrección de imagen, las rutinas de procesamiento de datos podrán reconocer mejor ciertos elementos del entorno 100 de estantes de exhibición en comparación a cuando están sometidos a la distorsión esferoide Vb, tales como el estante 200 de exhibición, el producto 12, la colocación real del producto 12, la al menos una característica 215 y/o el patrón de características 214. La FIG. 3B proporciona un ejemplo de al menos una imagen 310 que consiste en una imagen mejorada Vc gracias a la rutina de corrección de imagen, que ilustra cómo las rutinas de procesamiento de datos pueden reconocer mejor los elementos del entorno 100 de estantes de exhibición. Por ejemplo, es menos probable que se malinterprete la colocación real Pa del producto 12 presente en la imagen corregida Vc (FIG. 3B) con respecto al producto 12 contenido en la al menos una imagen 310 con distorsión esferoide Vb (FIG.
3A). Adicional o alternativamente, el dispositivo 300 de obtención de imágenes puede proporcionar al usuario 10 una transmisión a tiempo real o en vivo del producto 12. Por ejemplo, la pantalla 110 de visualización o el ordenador remoto 170 recibe la transmisión en vivo desde el dispositivo 300 de obtención de imágenes o a través del dispositivo informático 130 que se comunica con el dispositivo 300 de obtención de imágenes. Por motivos de seguridad, el acceso a la transmisión en vivo puede requerir seguridad, tal como una contraseña o una clave de cifrado.
Las FIGS. 4A-4D proporcionan imágenes 310, 310a-d ilustrativas del estante 200 de exhibición capturadas por el dispositivo de imagen 300 durante un período de tiempo t. En algunos ejemplos, se instruye al dispositivo 300 de obtención de imágenes para que capture al menos una imagen 310 en un intervalo de tiempo discreto, de modo que el dispositivo 300 de obtención de imágenes tenga un ciclo de captura de imágenes. Cuando el dispositivo 300 de obtención de imágenes captura la al menos una imagen 310, el dispositivo 300 de obtención de imágenes puede enviar la al menos una imagen 310 al dispositivo informático 130, al servidor 160 o al ordenador remoto 170 para su almacenamiento. Durante el almacenamiento, la al menos una imagen 310 se puede etiquetar con información de imagen, tal como información de la unidad de estante (por ejemplo, número de serie del estante, número del estante, ubicación del estante, etc.), información relativa a la fecha (por ejemplo, año, mes, día), y/o un sello de hora. Las FIGS.
4A-4D incluyen al menos una parte del estante 200 de exhibición en la que el producto 12 forma unas filas 12, 12a-g de producto correspondientes a cada tipo de producto, separadas por divisores 220 de estante. En algunos ejemplos, la al menos una parte del estante 200 de exhibición incluye la superficie superior 212 con al menos una característica 215 de un patrón de características 214.
La FIG. 4A proporciona una imagen 310, 310a del estante 200 de exhibición con existencias completas Scompletas. La FIG. 4A ilustra un primer intervalo de tiempo tü de un período de tiempo t al poco de que el usuario 10 haya repuesto completamente el producto 12 en el estante 200 de exhibición. Un método 600 del entorno 100 de estantes de exhibición incluye determinar el estado S de existencias en el estante 200 de exhibición en función de la al menos una imagen 310, tal como la imagen 310, 310a. En algunas implementaciones se detalla el estado S de existencias en el estante 200 de exhibición, de modo que el estado S de existencias estará definido por el porcentaje de existencias en el estante 200 de exhibición. En otros ejemplos, el estado S de existencias simplemente designa si el producto 12 en el estante 200 de exhibición está disponible Sdisponible o agotado Sagotado. La FIG. 4A es un ejemplo del estante 200 de exhibición en el que el estado de existencias es un estado disponible Sdisponible o lleno Sueno, dado que en la imagen 310, 310a no está presente al menos una característica 215.
La FIG. 4B proporciona una imagen 310, 310b del estante 200 de exhibición en un segundo intervalo de tiempo t 1 del periodo de tiempo t. Con respecto a la imagen 310, 310b, el método 600 incluye comunicar a un destinatario (por ejemplo, a un dispositivo cliente) que el tipo de producto 12 asociado con las filas 12, 12d,f,g de producto está agotado Sagotado. El método 600 también puede comunicar información cuantitativa de las existencias, tal como una cantidad Q de producto 12 disponible o agotado en cada fila 12, 12a-g de producto. Por ejemplo, en una primera fila 12, 12a de producto hay una unidad disponible y tres unidades agotadas del producto 12. Mientras, en la cuarta fila 12, 12d de productos no hay ninguna unidad disponible y cuatro agotadas (por ejemplo, existencias agotadas, Sagotado).
La FIG. 4C proporciona una imagen 310, 310c del estante 200 de exhibición en un tercer intervalo de tiempo t2 del periodo de tiempo t. La imagen 310, 310c es casi idéntica a la imagen 310, 310b excepto por que la cuarta fila 12, 12d de producto incluye un producto 12, 12o fuera de lugar. El método 600 incluye identificar el producto 12, 12o fuera de lugar y, en algunos ejemplos, proporcionar una alerta o información de cumplimiento 620 del planograma con respecto a la colocación real Pa del producto 12.
La FIG. 4D proporciona una imagen 310, 3 10d del estante 200 de exhibición en un cuarto intervalo de tiempo t3. La imagen 310, 310d muestra todas las filas 12, 12a-g de producto sin existencias, Sagotado, excepto por una quinta fila 12, 12e de producto en la que hay una unidad disponible y tres unidades agotadas del producto 12. Cuando las existencias del producto 12 en el estante 200 de exhibición están agotadas, Sagotado, el método 600 está configurado para comunicar a la red 150 el estado S.
La FIG. 5 es un planograma 500 ilustrativo de al menos un estante representativo 200r de exhibición correspondiente a al menos un estante 200 de exhibición. En algunos ejemplos, como cuando el estante 200 de exhibición incluye más de un estante 200, 200a-e de exhibición, el planograma 500 incluye más de un estante representativo 200r , 200aR-eR de exhibición. En cada estante representativo 200r de exhibición el planograma 500 ilustra al menos un producto representativo 12r en la colocación representativa Pr que corresponde a la colocación real Pa del producto 12 en el estante 200 de exhibición. Por ejemplo, cada producto representativo 12r en la parte frontal del estante representativo de exhibición corresponde a una fila de productos del estante 200 de exhibición con una cantidad Q. En algunos ejemplos el planograma 500 es una ilustración bidimensional de una vista frontal del estante representativo 200r de exhibición, de modo que el planograma 500 puede indicar una cantidad Q del producto representado 12r a modo de nota dentro del planograma 500. Adicional o alternativamente, el planograma 500 es una vista en perspectiva del estante representativo 200r de exhibición, como el ejemplo mostrado en la FIG. 5. En la vista en perspectiva, la cantidad Q del producto representado 12r puede visualizarse mediante la profundidad del producto representativo 12r .
Las FIGS. 6A y 6B proporcionan disposiciones ilustrativas de operaciones para un método 600 de detección de productos y/o cumplimiento del planograma. Como se describe con respecto a las FIGS. 4A-4D, el método 600 puede incluir proporcionar al menos información cuantitativa de existencias relacionada con el producto o con el cumplimiento referente a la colocación real Pa del producto 12. En la operación 602, el método 600 incluye recibir el planograma 500 que define la colocación representativa Pr del producto 12 en el estante 200 de exhibición y al menos una imagen 310 desde el dispositivo 300 de obtención de imágenes. El método 600 incluye además, en la operación 604, determinar si el producto 12 está dispuesto en el estante 200 de exhibición en función de la al menos una imagen 310. Si el producto 12 está dispuesto en el estante 200 de exhibición, el método 600 pasa a la operación 610. De lo contrario, si el producto 12 no está dispuesto en el estante 200 de exhibición, el método 600 pasa a la operación 606.
En la operación 606, el método 600 incluye determinar que el producto 12 no está dispuesto en el estante 200 de exhibición. Dado que en la al menos una imagen 310 el producto 12 no está dispuesto en el estante 200 de exhibición, el método 600 incluye determinar que el estado S de existencias del producto 12 es un estado agotado Sagotado. El método 600 puede incluir, en la operación 608, comunicar a la red 150 que el estado S de existencias del producto 12 es un estado agotado Sagotado.
El método 600 puede incluir la ejecución de las operaciones 610 a 618, que pueden producirse cuando el producto 12 está dispuesto en el estante 200 de exhibición. Si el producto 12 está situado en el estante 200 de exhibición, el método 600 incluye determinar, en la operación 610, la colocación real Pa del producto 12 en el estante 200 de exhibición. Si el producto 12 está dispuesto en el estante 200 de exhibición, el método 600 también puede incluir determinar que el estado S de existencias del producto 12 es un estado disponible Sdisponible y, opcionalmente, comunicar a la red 150 el estado S de existencias del producto 12. Adicional o alternativamente, si el método 600 determina la colocación real Pa del producto 12, el método 600 puede incluir comunicar la colocación real Pa del producto 12 a la red 150.
En la operación 612, el método 600 incluye comparar la colocación real Pa del producto 12 con la colocación representativa Pr del producto 12 definida por el planograma 500. Si el método 600 determina que la colocación real Pa es igual que la colocación representativa Pr , el método 600 puede pasar a la operación 616. De lo contrario, si el método 600 determina que la colocación real Pa es diferente a la colocación representativa Pr , el método 600 puede pasar a la operación 614.
En ambas operaciones 614 y 616, el método 600 puede comunicar un cumplimiento 620 del planograma a la red 150. En la operación 614, el método 600 comunica a la red 150 que el cumplimiento 620 del planograma no es efectivo, porque la colocación real Pa es diferente a la colocación representativa Pr . En la operación 616, el método 600 comunica a la red 150 que el cumplimiento 620 del planograma es efectivo, porque la colocación real Pa es igual a la colocación representativa Pr .
En la operación 618, el método 600 puede incluir determinar la cantidad Q del producto 12 en el estante 200 de exhibición. Si el método 600 determina la cantidad Q, el método 600 puede comunicar la cantidad Q a la red 150. La operación 618 puede producirse en cualquier momento una vez que el método 600 haya determinado que el estante 200 de exhibición contiene el producto 12.
La FIG. 6B proporciona una disposición ilustrativa del método 600 para determinar la colocación real Pa del producto 12 dispuesto en el estante 200 de exhibición. En la operación 610a, el método 600 incluye determinar la cantidad Q de características expuestas 215e en la superficie superior 212 del estante 200 de exhibición capturada en la al menos una imagen 310. En la operación 610b, el método 600 incluye identificar unas correspondientes ubicaciones de las características expuestas 215e en la superficie superior 212 del estante 200 de exhibición capturada en la al menos una imagen 310. En la operación 610c, el método 600 incluye detectar los bordes E de las características expuestas 215e en la al menos una imagen 310. En la operación 610d, el método 600 puede incluir determinar una aproximación de las características expuestas 215e en función de los bordes detectados E de las características expuestas 215e . En la operación 610e, el método 600 puede incluir comparar la aproximación de las características expuestas 215e con el patrón de características 214. Cuando la aproximación de las características expuestas 215e se corresponda con las características reales 215a del patrón de características 214, el método 600 puede pasar a la operación 610g.
Para cada aproximación de las características expuestas 215e que se corresponda con las características reales 215a del patrón de características 214, el método 600 puede incluir incrementar el recuento de la cantidad Q de las características expuestas 215e . Adicional o alternativamente, para cada aproximación de las características expuestas 215e que se corresponda con las características reales 215a del patrón de características 214, el método 600 puede incluir identificar la correspondiente ubicación de la característica real 215a del patrón de características 214.
En algunos ejemplos, el método 600 incluye ejecutar un algoritmo de detección de espacios en estante para determinar si el producto 12 está dispuesto en el estante 200 de exhibición y/o la colocación real Pa del producto 12 en el estante 200 de exhibición. Mediante el algoritmo de detección de espacios en estante, el método 600 puede incluir recibir entradas, tal como la característica 215 del patrón de características 214, una correspondiente longitud El de borde de la característica 215, un factor de aproximación Af de características, y las correspondientes tolerancias para cada entrada. Si el método 600 se ejecuta sin tolerancias para cada entrada, el método 600 puede incluir la recepción de tolerancias predeterminadas para cada entrada. En algunos ejemplos, el método 600 recibe al menos una imagen 310 y convierte la al menos una imagen 310 en una imagen en escala de grises para simplificar la detección de bordes durante el método 600. En algunas implementaciones, el método 600 incluye la detección de bordes E de las características expuestas 215e utilizando una aproximación de cadena simple. Con la entrada del factor de aproximación Af de características, el método 600 puede incluir convertir los bordes E determinados mediante la detección en una característica cerrada a comparar con la característica 215.
Adicional o alternativamente, el método 600 incluye la eliminación de cualquier característica cerrada que incluya un número mayor de bordes E o un número menor de bordes E que la característica 215 de entrada. Por ejemplo, en las FIGS. 2-4, la característica 215 es un triángulo con tres bordes y el método 600 puede incluir eliminar en la determinación de detección de bordes E las características cerradas que tengan más de tres bordes o menos de tres bordes. Además, si el método 600 incluye recibir una entrada, tal como la correspondiente longitud El de borde de la característica 215, el método 600 también puede incluir calcular un área que corresponda con cada característica cerrada 215. Con el área de cada característica cerrada 215, el método 600 también puede incluir eliminar las características cerradas 215 definidas por áreas sin correlación con un área de la característica 215. Después de limitar las características 215 cerradas atípicas determinadas mediante la detección del método 600, el método 600 puede incluir una o más operaciones que consideren las características cerradas restantes como posibles detecciones válidas de la característica 215 o características expuestas 215e del patrón de características 214.
En algunas implementaciones, el método 600 incluye dar salida a detalles relacionados con el método 600 de modo que los detalles sean accesibles para el entorno 100 de estantes de exhibición (por ejemplo, el dispositivo informático 130, el servidor 160 o el ordenador remoto 170). Los detalles pueden incluir: salidas del método 600, tales como la colocación real Pa de un producto 12, el cumplimiento 620 del planograma, la cantidad de características expuestas 215e , el estado S de existencias de un producto 12, o la ubicación de una característica real 215; o entradas del método 600, tales como la característica 215 del patrón de características 214, una correspondiente longitud El de borde de la característica 215, un factor Af de aproximación de características, o correspondientes tolerancias para cada entrada. El método 600 puede incluir dar salida a los detalles en cualquier formato de serialización de datos (por ejemplo, notación de objetos de secuencias de comandos Java (JSON), lenguaje de marcado extensible (XML), etc.).
Adicional o alternativamente, el método 600 incluye generar un planograma óptimo 500o para el producto 12 dentro del entorno 100 de estantes de exhibición. Por ejemplo, el usuario 10 proporciona una entrada que incluye información de unidades de estante con respecto al entorno 100 de estantes de exhibición. Una vez proporcionada la información de estantes, tal como el número de estante y la ubicación de estante, el método 600 puede incluir clasificar cada estante 200 de exhibición según una prioridad del planograma. El método 600 puede incluir entonces determinar una tasa de agotamiento del producto en función de la colocación real Pa del producto 12 dentro de las imágenes 310 (por ejemplo, 310, 310a-d) capturadas por el dispositivo 300 de obtención de imágenes durante un período de tiempo t. De acuerdo con la correspondiente tasa de agotamiento del producto, el método 600 puede incluir asignar un orden de importancia a cada tipo de producto 12 dentro del entorno 100 de estantes de exhibición. Por ejemplo, el método 600 puede incluir asignar a un primer producto 12 que tenga una tasa de agotamiento elevada durante el período de tiempo t un orden de importancia mayor que un segundo producto que tenga una tasa de agotamiento baja durante el período de tiempo t (por ejemplo, con respecto a una tasa umbral de agotamiento). Con el orden de importancia y la prioridad del planograma de cada estante 200 de exhibición, el método 600 puede incluir determinar el planograma óptimo 500o para cada tipo de producto 12.
Una aplicación de software (es decir, un recurso de software) puede referirse a un software informático que haga que un dispositivo informático lleve a cabo una tarea. En algunos ejemplos, una aplicación de software puede denominarse "aplicación", "app" o "programa". Algunas aplicaciones ilustrativas incluyen, pero sin limitación, aplicaciones de diagnóstico del sistema, aplicaciones de administración del sistema, aplicaciones de mantenimiento del sistema, aplicaciones de procesamiento de textos, aplicaciones de hojas de cálculo, aplicaciones de mensajería, aplicaciones de transmisión de medios, aplicaciones de redes sociales y aplicaciones de juegos.
La FIG. 7 es una vista esquemática de un dispositivo informático 700 ilustrativo que puede usarse para implementar los sistemas y métodos descritos en este documento. El dispositivo informático 700 está destinado a representar diversas formas de ordenadores digitales, tales como portátiles, equipos de sobremesa, estaciones de trabajo, asistentes digitales personales, servidores, servidores blade, unidades centrales y otros ordenadores apropiados. Los componentes aquí mostrados, así como sus conexiones, relaciones y funciones pretenden ser solo un ejemplo y no pretenden limitar las implementaciones de las invenciones descritas y/o reivindicadas en este documento.
El dispositivo informático 700 incluye un procesador 710, una memoria 720, un dispositivo 730 de almacenamiento, una interfaz/controlador 740 de alta velocidad que conecta con la memoria 720 y unos puertos 750 de expansión de alta velocidad, y una interfaz/controlador 760 de baja velocidad que conecta con un bus 770 baja de velocidad y un dispositivo 730 de almacenamiento. Cada uno de los componentes 710, 720, 730, 740, 750 y 760 se interconecta mediante varios buses y puede montarse en una placa base común o de otras maneras, según corresponda. El procesador 710 puede procesar instrucciones para su ejecución dentro del dispositivo informático 700, incluidas instrucciones almacenadas en la memoria 720 o en el dispositivo 730 de almacenamiento para mostrar información gráfica para una interfaz gráfica de usuario (GUI) en un dispositivo externo de entrada/salida, tal como una pantalla 580 acoplada a la interfaz 740 de alta velocidad. En otras implementaciones pueden usarse múltiples procesadores y/o múltiples buses, según corresponda, junto con múltiples memorias y tipos de memoria. Además, pueden conectarse múltiples dispositivos informáticos 700, proporcionando cada dispositivo partes de las operaciones necesarias (por ejemplo, un banco de servidores, un grupo de servidores blade o un sistema multiprocesadores).
La memoria 720 almacena información de forma no transitoria dentro del dispositivo informático 700. La memoria 720 puede ser un medio legible por ordenador, una o más unidades de memoria volátil o una o más unidades de memoria no volátil. La memoria no transitoria 720 puede ser un dispositivo físico que se utilice para almacenar de forma temporal o permanente programas (por ejemplo, secuencias de instrucciones) o datos (por ejemplo, información de estado de programa) a usar por el dispositivo informático 700. Algunos ejemplos de memoria no volátil incluyen, pero sin limitación, memoria flash y memoria de solo lectura (ROM)/memoria de solo lectura programable (PROM)/memoria de solo lectura programable borrable (EPROM)/memoria de solo lectura programable borrable electrónicamente (EEPROM) (p. ej., normalmente se usa para firmware, tales como programas de arranque). Algunos ejemplos de memoria volátil incluyen, pero sin limitación, memoria de acceso aleatorio (RAM), memoria dinámica de acceso aleatorio (DRAM), memoria estática de acceso aleatorio (SRAM), memoria de cambio de fase (PCM), así como discos o cintas.
El dispositivo 730 de almacenamiento es capaz de proporcionar almacenamiento masivo para el dispositivo informático 700. En algunas implementaciones, el dispositivo 730 de almacenamiento es un medio legible por ordenador. En varias implementaciones diferentes, el dispositivo 730 de almacenamiento puede ser un dispositivo de disquete, un dispositivo de disco duro, un dispositivo de disco óptico o un dispositivo de cinta, una memoria flash u otro dispositivo de memoria de estado sólido similar, o una matriz de dispositivos, incluidos dispositivos en una red de área de almacenamiento u otras configuraciones. En implementaciones adicionales, un producto de programa informático está materializado de forma tangible en un soporte de información. El producto de programa informático contiene instrucciones que, cuando se ejecutan, llevan a cabo uno o más métodos tales como los descritos anteriormente. El portador de información es un medio legible por ordenador o máquina, tal como la memoria 720, el dispositivo 730 de almacenamiento o la memoria en el procesador 710.
El controlador 740 de alta velocidad gestiona operaciones con un uso intenso del ancho de banda para el dispositivo informático 700, mientras que el controlador 760 de baja velocidad gestiona operaciones con un uso menos intenso del ancho de banda. Tal asignación de funciones es solo ilustrativa. En algunas implementaciones, el controlador 740 de alta velocidad está acoplado a la memoria 720, la pantalla 780 (p. ej., a través de un procesador o acelerador de gráficos) y a los puertos 750 de expansión de alta velocidad, que pueden aceptar varias tarjetas de expansión (no mostradas). En algunas implementaciones, el controlador 760 de baja velocidad está acoplado al dispositivo 730 de almacenamiento y un puerto 790 de expansión de baja velocidad. El puerto 790 de expansión de baja velocidad, que puede incluir varios puertos de comunicación (por ejemplo, USB, Bluetooth, Ethernet, Ethernet inalámbrica), puede acoplarse a uno o más dispositivos de entrada/salida, tales como un teclado, un dispositivo de puntero, un escáner, o un dispositivo de red tal como un conmutador o rúter, por ejemplo, a través de un adaptador de red.
El dispositivo informático 700 puede implementarse en varias formas diferentes, como se muestra en la figura. Por ejemplo, puede implementarse como un servidor estándar 700a o varias veces en un grupo de dichos servidores 700a, como un ordenador portátil 700b o como parte de un sistema 700c de servidores en bastidor.
Varias implementaciones de los sistemas y las técnicas descritas en el presente documento se pueden realizar en circuitos ópticos y/o electrónicos digitales, circuitos integrados, circuitos ASIC especialmente diseñados (circuitos integrados de aplicación específica), hardware, firmware, software y/o combinaciones de los mismos. Estas diversas implementaciones pueden incluir la implementación en uno o más programas informáticos que sean ejecutables y/o interpretables en un sistema programable que incluya al menos un procesador programable, que puede ser de propósito especial o general, acoplado para recibir datos e instrucciones desde, y para transmitir datos e instrucciones a, un sistema de almacenamiento, al menos un dispositivo de entrada y al menos un dispositivo de salida.
Estos programas informáticos (también conocidos como programas, software, aplicaciones de software o código) incluyen instrucciones mecánicas para un procesador programable y pueden implementarse en un lenguaje de programación orientado a objetos y/o procedimientos de alto nivel, y/o en lenguaje ensamblador/mecánico. Tal como se usan en el presente documento, las expresiones "medio legible por máquina" y "medio legible por ordenador" se refieren a cualquier producto de programa informático, medio no transitorio legible por ordenador, aparato y/o dispositivo (por ejemplo, disco magnético, discos óptico, memoria, dispositivo lógico programable (PLD)) que se utilice para proporcionar instrucciones y/o datos mecánicos a un procesador programable, incluido un medio legible por máquina que reciba instrucciones mecánicas como una señal legible por máquina. La expresión "señal legible por máquina" se refiere a cualquier señal que se utilice para proporcionar instrucciones y/o datos mecánicos a un procesador programable.
Los procesos y flujos lógicos descritos en esta memoria pueden llevarse a cabo mediante uno o más procesadores programables que ejecuten uno o más programas informáticos para llevar a cabo funciones operando con datos de entrada y generando resultados. Los procesos y flujos lógicos también se pueden llevar a cabo mediante circuitos lógicos de propósito especial, por ejemplo, una FPGA (matriz de puertas programables en campo) o un ASIC (circuito integrado de aplicación específica). Algunos procesadores adecuados para la ejecución de un programa informático incluyen, a modo ilustrativo, microprocesadores de propósito tanto general como especial, y uno o más procesadores de cualquier tipo de ordenador digital. Generalmente, un procesador recibirá instrucciones y datos desde una memoria de solo lectura o desde una memoria de acceso aleatorio, o desde ambas. Los elementos esenciales de un ordenador son un procesador para ejecutar instrucciones y uno o más dispositivos de memoria para almacenar instrucciones y datos. Generalmente, un ordenador también incluirá uno o más dispositivos de almacenamiento masivo para almacenar datos, por ejemplo, discos magnéticos, magneto-ópticos u ópticos, o estará operativamente acoplado para recibir datos desde los mismos o transferir datos a los mismos, o ambos. Sin embargo, un ordenador no tiene por qué contar con tales dispositivos. Medios legibles por ordenador adecuados para almacenar instrucciones y datos de programas informáticos incluyen todas las formas de memoria no volátil, medios y dispositivos de memoria, incluidos, a modo ilustrativo, dispositivos de memoria semiconductora, por ejemplo, EPROM, EEPROM y dispositivos de memoria flash; discos magnéticos, por ejemplo, discos duros internos o discos extraíbles; discos magneto-ópticos; y discos CD ROM y DVD-ROM. El procesador y la memoria pueden complementarse mediante o incorporarse en un circuito lógico de propósito especial.
Para permitir la interacción por parte de un usuario, uno o más aspectos de la divulgación pueden implementarse en un ordenador que tenga un dispositivo de representación visual, por ejemplo, un monitor de tipo CRT (tubo de rayos catódicos), LCD (pantalla de cristal líquido) o pantalla táctil para mostrar información al usuario y, opcionalmente, un teclado y un dispositivo de puntero, por ejemplo, una bola de seguimiento o un ratón mediante el cual el usuario pueda proporcionar información al ordenador. También pueden usarse otros tipos de dispositivos para la interacción por parte de un usuario; por ejemplo, la retroalimentación proporcionada al usuario puede ser cualquier forma de retroalimentación sensorial, por ejemplo, retroalimentación visual, retroalimentación auditiva o retroalimentación táctil; y la entrada del usuario se puede recibir de cualquier forma, incluyendo una entrada acústica, de voz o táctil. Además, un usuario puede interactuar con un ordenador enviando y recibiendo documentos a/desde un dispositivo utilizado por el mismo; por ejemplo, enviando páginas web a un navegador web del dispositivo cliente de un usuario en respuesta a solicitudes recibidas desde el navegador web.
Se han descrito varias implementaciones. No obstante, se entenderá que pueden practicarse diversas modificaciones sin apartarse del espíritu y alcance de la divulgación. En consecuencia, otras implementaciones están dentro del alcance de las siguientes reivindicaciones.

Claims (9)

REIVINDICACIONES
1. Un método (600) que comprende:
recibir, en un hardware (132) de procesamiento de datos, un planograma (500) que define la colocación representativa (Pr) de un producto (12) en un estante (200) de exhibición dentro de un entorno (100) de estantes de exhibición, comprendiendo el entorno (100) de estantes de exhibición el estante (200) de exhibición y una pantalla (110) de visualización dispuesta en el estante (200) de exhibición y en el campo de visión (FV) de un usuario, estando configurada la pantalla (110) de visualización para representar contenido multimedia (112);
recibir, en el hardware (132) de procesamiento de datos, al menos una imagen (310) desde un dispositivo (300) de obtención de imágenes ubicado encima del estante (200) de exhibición y que tiene un campo de visión (Fv) dispuesto para capturar una superficie superior (212) del estante (200) de exhibición, en donde la superficie superior (212) del estante (200) de exhibición define un patrón de características (214) que incluye al menos una característica (215) de forma poligonal, representando la al menos una imagen (310) al menos una parte de la superficie superior (212) del estante (200) de exhibición con características expuestas (215e);
determinar, mediante el hardware (132) de procesamiento de datos, si el producto (12) está dispuesto en el estante (200) de exhibición en función de la al menos una imagen (310), de la siguiente manera:
detectando los bordes (E) de las características expuestas (215e) en la al menos una imagen;
convirtiendo los bordes (E) en características cerradas; y
comparando las características cerradas con la al menos una característica (215) de forma poligonal para determinar si el producto (12) está dispuesto en el estante (200) de exhibición; y
si el producto (12) está dispuesto en el estante (200) de exhibición:
determinando, mediante el hardware (132) de procesamiento de datos, la colocación real (Pa ) del producto (12) en el estante (200) de exhibición;
comparando, mediante el hardware (132) de procesamiento de datos, la colocación real (Pa ) del producto (12) con la colocación representativa (Pr) del producto (12) definida por el planograma (500);
determinando, mediante el hardware (132) de procesamiento de datos, un cumplimiento (620) del planograma en función de la comparación de la colocación real (Pa ) del producto (12) con la colocación representativa (Pr ) del producto (12); y
comunicando a una red (150), mediante el hardware (132) de procesamiento de datos, el cumplimiento (620) del planograma.
2. El método (600) de la reivindicación 1, que comprende, además:
si el producto (12) no está dispuesto en el estante (200) de exhibición, determinar, mediante el hardware (132) de procesamiento de datos, que un estado (S) de existencias del producto (12) es un estado agotado;
si el producto (12) está dispuesto en el estante (200) de exhibición, determinar, mediante el hardware (132) de procesamiento de datos, que el estado (S) de existencias del producto (12) es un estado disponible; y comunicar a la red (150), mediante el hardware (132) de procesamiento de datos, el estado (S) de existencias del producto (12).
3. El método (600) de la reivindicación 1 o 2, que comprende, además, si el producto (12) está dispuesto en el estante (200) de exhibición:
determinar, mediante el hardware (132) de procesamiento de datos, la cantidad (Q) del producto (12) en el estante (200) de exhibición; y
comunicar a la red (150), mediante el hardware (132) de procesamiento de datos, la cantidad (Q) del producto (12).
4. El método (600) de cualquiera de las reivindicaciones 1-3, que comprende, además, comunicar a la red (150), mediante el hardware (132) de procesamiento de datos, la colocación real (Pa ) del producto (12).
5. El método (600) de la reivindicación 1, en donde determinar si el producto (12) está dispuesto en el estante (200) de exhibición comprende determinar una cantidad de las características expuestas (215e) en la superficie superior (212) del estante (200) de exhibición capturada en la al menos una imagen (310).
6. El método (600) de la reivindicación 5, en donde determinar la colocación real (Pa ) del producto (12) en el estante (200) de exhibición comprende identificar las correspondientes ubicaciones de las características expuestas (215e) en la superficie superior (212) del estante (200) de exhibición capturada en la al menos una imagen (310).
7. El método (600) de la reivindicación 6, que comprende, además:
aproximar, mediante el hardware (132) de procesamiento de datos, las características expuestas (215e) en función de los bordes detectados (E) de las características expuestas (215e );
comparar, mediante el hardware (132) de procesamiento de datos, las características expuestas aproximadas (215e) con el patrón de características (214);
determinar, mediante el hardware (132) de procesamiento de datos, si las características expuestas aproximadas (215e) corresponden a características reales (215a ) del patrón de características (214); y
para cada característica expuesta aproximada (215e), cuando la característica expuesta aproximada (215e) corresponda a una respectiva característica real (215a ) del patrón de características (214):
incrementar, mediante el hardware (132) de procesamiento de datos, un recuento de la cantidad (Q) de características expuestas (215e); e
identificar, mediante el hardware (132) de procesamiento de datos, la correspondiente ubicación de la característica real (215a ) dentro del patrón de características (214).
8. El método (600) de la reivindicación 7, que comprende, además, ejecutar, mediante el hardware (132) de procesamiento de datos, una rutina de corrección de imagen en la al menos una imagen (310), corrigiendo la rutina de corrección de imagen al menos la distorsión esferoide (Vb) de la al menos una imagen (310).
9. Un sistema que comprende:
un hardware (132) de procesamiento de datos; y
un hardware (134) de memoria en comunicación con el hardware (132) de procesamiento de datos, almacenando el hardware (134) de memoria instrucciones que, cuando se ejecutan en el hardware (132) de procesamiento de datos, hacen que el hardware (132) de procesamiento de datos lleve a cabo el método de una cualquiera de las reivindicaciones anteriores.
ES18716049T 2017-03-21 2018-03-15 Determinación del cumplimiento de la colocación de productos Active ES2954444T3 (es)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/464,777 US10643177B2 (en) 2017-03-21 2017-03-21 Determining product placement compliance
PCT/US2018/022671 WO2018175203A1 (en) 2017-03-21 2018-03-15 Determining product placement compliance

Publications (1)

Publication Number Publication Date
ES2954444T3 true ES2954444T3 (es) 2023-11-22

Family

ID=61906852

Family Applications (1)

Application Number Title Priority Date Filing Date
ES18716049T Active ES2954444T3 (es) 2017-03-21 2018-03-15 Determinación del cumplimiento de la colocación de productos

Country Status (10)

Country Link
US (2) US10643177B2 (es)
EP (1) EP3602436B1 (es)
JP (1) JP7142026B2 (es)
CN (1) CN110546661B (es)
AU (1) AU2018239923B2 (es)
BR (1) BR112019019573A2 (es)
CA (1) CA3057073C (es)
ES (1) ES2954444T3 (es)
MX (1) MX2019011179A (es)
WO (1) WO2018175203A1 (es)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10831431B2 (en) 2017-04-18 2020-11-10 Anthony, Inc. Shelving display
DE112018002314T5 (de) 2017-05-01 2020-01-23 Symbol Technologies, Llc Verfahren und vorrichtung zur erkennung eines objektstatus
WO2018204342A1 (en) * 2017-05-01 2018-11-08 Symbol Technologies, Llc Product status detection system
US11449059B2 (en) 2017-05-01 2022-09-20 Symbol Technologies, Llc Obstacle detection for a mobile automation apparatus
US11600084B2 (en) 2017-05-05 2023-03-07 Symbol Technologies, Llc Method and apparatus for detecting and interpreting price label text
US11506483B2 (en) 2018-10-05 2022-11-22 Zebra Technologies Corporation Method, system and apparatus for support structure depth determination
US11090811B2 (en) 2018-11-13 2021-08-17 Zebra Technologies Corporation Method and apparatus for labeling of support structures
DE102018129886A1 (de) * 2018-11-27 2020-05-28 Chep Technology Pty Ltd. Warenbevorratungssystem
US11079240B2 (en) 2018-12-07 2021-08-03 Zebra Technologies Corporation Method, system and apparatus for adaptive particle filter localization
US11416000B2 (en) 2018-12-07 2022-08-16 Zebra Technologies Corporation Method and apparatus for navigational ray tracing
CA3028708A1 (en) 2018-12-28 2020-06-28 Zih Corp. Method, system and apparatus for dynamic loop closure in mapping trajectories
US11402846B2 (en) 2019-06-03 2022-08-02 Zebra Technologies Corporation Method, system and apparatus for mitigating data capture light leakage
US11341663B2 (en) 2019-06-03 2022-05-24 Zebra Technologies Corporation Method, system and apparatus for detecting support structure obstructions
US11080566B2 (en) 2019-06-03 2021-08-03 Zebra Technologies Corporation Method, system and apparatus for gap detection in support structures with peg regions
US11151743B2 (en) 2019-06-03 2021-10-19 Zebra Technologies Corporation Method, system and apparatus for end of aisle detection
US11960286B2 (en) 2019-06-03 2024-04-16 Zebra Technologies Corporation Method, system and apparatus for dynamic task sequencing
US11662739B2 (en) 2019-06-03 2023-05-30 Zebra Technologies Corporation Method, system and apparatus for adaptive ceiling-based localization
WO2021039314A1 (ja) * 2019-08-28 2021-03-04 日本電気株式会社 店舗管理システム、店舗管理方法、コンピュータプログラム及び記録媒体
US11507103B2 (en) 2019-12-04 2022-11-22 Zebra Technologies Corporation Method, system and apparatus for localization-based historical obstacle handling
US11107238B2 (en) 2019-12-13 2021-08-31 Zebra Technologies Corporation Method, system and apparatus for detecting item facings
CN111260299B (zh) * 2020-02-18 2023-07-18 中国联合网络通信集团有限公司 货品盘点及管理方法、装置、电子设备及存储介质
US11423354B2 (en) * 2020-03-05 2022-08-23 Zebra Technologies Corporation Smart shelf systems and methods of operating the same
CN111428621A (zh) * 2020-03-20 2020-07-17 京东方科技集团股份有限公司 货架交互方法、装置和货架
US11822333B2 (en) 2020-03-30 2023-11-21 Zebra Technologies Corporation Method, system and apparatus for data capture illumination control
US11714926B1 (en) 2020-05-29 2023-08-01 The Hershey Company Product display design and manufacturing using a product display design model
US11450024B2 (en) 2020-07-17 2022-09-20 Zebra Technologies Corporation Mixed depth object detection
US11593915B2 (en) 2020-10-21 2023-02-28 Zebra Technologies Corporation Parallax-tolerant panoramic image generation
CN113034531A (zh) * 2021-04-02 2021-06-25 广州绿怡信息科技有限公司 设备摆放检测方法及装置
US11954882B2 (en) 2021-06-17 2024-04-09 Zebra Technologies Corporation Feature-based georegistration for mobile computing devices

Family Cites Families (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3908047B2 (ja) 2002-02-04 2007-04-25 富士通株式会社 陳列状態監視方法及び陳列状態監視プログラム
US7450760B2 (en) * 2005-05-18 2008-11-11 Scanr, Inc. System and method for capturing and processing business data
CA2584683A1 (en) * 2006-04-20 2007-10-20 Optosecurity Inc. Apparatus, method and system for screening receptacles and persons
US7693757B2 (en) * 2006-09-21 2010-04-06 International Business Machines Corporation System and method for performing inventory using a mobile inventory robot
US8630924B2 (en) * 2007-08-31 2014-01-14 Accenture Global Services Limited Detection of stock out conditions based on image processing
US8189855B2 (en) 2007-08-31 2012-05-29 Accenture Global Services Limited Planogram extraction based on image processing
US7949568B2 (en) * 2007-08-31 2011-05-24 Accenture Global Services Limited Determination of product display parameters based on image processing
US8091782B2 (en) * 2007-11-08 2012-01-10 International Business Machines Corporation Using cameras to monitor actual inventory
JP5397751B2 (ja) * 2009-03-19 2014-01-22 株式会社ニコン カメラおよび画像補正方法
US8577136B1 (en) * 2010-12-28 2013-11-05 Target Brands, Inc. Grid pixelation enhancement for in-stock analytics
US9785898B2 (en) * 2011-06-20 2017-10-10 Hi-Tech Solutions Ltd. System and method for identifying retail products and determining retail product arrangements
US9129277B2 (en) * 2011-08-30 2015-09-08 Digimarc Corporation Methods and arrangements for identifying objects
US20130092312A1 (en) * 2011-10-14 2013-04-18 Kellogg Company Methods for forming composite structures
US9672226B2 (en) * 2011-10-27 2017-06-06 Agency For Science, Technology And Research Method to identify an object and a system for doing the same
JP6153087B2 (ja) 2011-12-16 2017-06-28 日本電気株式会社 情報処理システム、情報処理方法、情報処理装置およびその制御方法と制御プログラム、通信端末およびその制御方法と制御プログラム
US20130235206A1 (en) 2012-03-12 2013-09-12 Numerex Corp. System and Method of On-Shelf Inventory Management
US8941645B2 (en) 2012-05-11 2015-01-27 Dassault Systemes Comparing virtual and real images in a shopping experience
US20140006117A1 (en) * 2012-06-29 2014-01-02 International Business Machines Corporation Personalized reorder point based advertisement
US9031872B1 (en) * 2013-03-12 2015-05-12 Target Brands, Inc. Digital sign with incorrectly stocked item identification
US9259891B2 (en) * 2013-06-14 2016-02-16 Electronic Imaging Services, Inc. Pad of labels and labels for use on store shelves in a retail environment
US9886678B2 (en) * 2013-09-25 2018-02-06 Sap Se Graphic representations of planograms
US20150206188A1 (en) 2014-01-17 2015-07-23 Panasonic Intellectual Property Corporation Of America Item presentation method, and information display method
JP6699547B2 (ja) * 2014-03-12 2020-05-27 日本電気株式会社 陳列状況解析装置、陳列状況解析方法およびプログラム
WO2016019352A2 (en) 2014-07-31 2016-02-04 Internet Connectivity Group, Inc. Dynamic merchandising communication system
KR102260805B1 (ko) * 2014-08-06 2021-06-07 삼성전자주식회사 이미지 검색 장치 및 그 방법
JP6484956B2 (ja) 2014-08-18 2019-03-20 富士通株式会社 陳列状況管理方法、陳列状況管理プログラムおよび情報処理装置
JP2016077840A (ja) * 2014-10-17 2016-05-16 長谷川　裕司 商品説明動画自動再生システム
US9483704B2 (en) * 2014-12-10 2016-11-01 Ricoh Co., Ltd. Realogram scene analysis of images: superpixel scene analysis
US9710926B2 (en) * 2015-01-30 2017-07-18 Hewlett-Packard Development Company, L.P. Image processing of a retail shelf area
JP2016194833A (ja) * 2015-03-31 2016-11-17 富士通株式会社 商品陳列位置の判定処理方法、商品陳列位置の判定処理プログラム、及び商品陳列位置の判定処理装置
KR101569411B1 (ko) * 2015-04-01 2015-11-27 주식회사 피엘케이 테크놀로지 보행자 인식 장치 및 그 방법
WO2016179065A1 (en) * 2015-05-04 2016-11-10 Sunrise R&D Holdings, Llc Systems and methods for controlling shelf display units and for graphically presenting information on shelf display units
US10885493B2 (en) * 2015-05-16 2021-01-05 Tata Consultancy Services Limited Method and system for planogram compliance check based on visual analysis
EP3311348A4 (en) 2015-06-17 2019-02-20 Panasonic Intellectual Property Management Co., Ltd. INVENTORY MANAGEMENT DEVICE, METHOD AND SYSTEM
US9858481B2 (en) * 2015-11-23 2018-01-02 Lexmark International, Inc. Identifying consumer products in images
JP6624911B2 (ja) * 2015-12-03 2019-12-25 キヤノン株式会社 計測装置、計測方法および物品の製造方法
US10592854B2 (en) 2015-12-18 2020-03-17 Ricoh Co., Ltd. Planogram matching
US10445821B2 (en) * 2015-12-18 2019-10-15 Ricoh Co., Ltd. Planogram and realogram alignment
CN105701635A (zh) * 2016-03-15 2016-06-22 江阴中科今朝科技有限公司 基于移动互联网技术的物流货物实时跟踪管理系统
US10152213B2 (en) * 2016-09-01 2018-12-11 Adobe Systems Incorporated Techniques for selecting objects in images
US10552787B2 (en) * 2016-09-04 2020-02-04 International Business Machines Corporation Store planogram to image registrations
CN110461191A (zh) * 2016-10-21 2019-11-15 胜嘉有限公司 分离式重力作用下商品推进座及装配组合
JP6896401B2 (ja) * 2016-11-25 2021-06-30 東芝テック株式会社 物品認識装置
WO2018098394A1 (en) * 2016-11-25 2018-05-31 Glowforge Inc. Fabrication with image tracing
US20180165711A1 (en) * 2016-12-13 2018-06-14 Frito-Lay North America, Inc. Smart Product Display Systems and Related Methods Providing Consumer Behavior Analytics
US11151372B2 (en) * 2019-10-09 2021-10-19 Elsevier, Inc. Systems, methods and computer program products for automatically extracting information from a flowchart image

Also Published As

Publication number Publication date
US20200219046A1 (en) 2020-07-09
US10643177B2 (en) 2020-05-05
MX2019011179A (es) 2020-02-07
JP2020518044A (ja) 2020-06-18
WO2018175203A1 (en) 2018-09-27
CA3057073A1 (en) 2018-09-27
AU2018239923B2 (en) 2021-02-04
AU2018239923A1 (en) 2019-10-10
CA3057073C (en) 2022-06-14
US20180276596A1 (en) 2018-09-27
BR112019019573A2 (pt) 2020-04-14
CN110546661A (zh) 2019-12-06
EP3602436B1 (en) 2023-06-21
EP3602436A1 (en) 2020-02-05
US11587029B2 (en) 2023-02-21
CN110546661B (zh) 2023-07-18
JP7142026B2 (ja) 2022-09-26

Similar Documents

Publication Publication Date Title
ES2954444T3 (es) Determinación del cumplimiento de la colocación de productos
CN109446883B (zh) 商品状态识别方法、装置、电子设备及可读存储介质
US11640576B2 (en) Shelf monitoring device, shelf monitoring method, and shelf monitoring program
US11288734B2 (en) Intelligent shelf display system
US11409491B2 (en) Shelving display
US20210216952A1 (en) System and Methods for Inventory Management
Satapathy et al. Smart Shelfie--Internet of Shelves: For Higher On-Shelf Availability
US20140344773A1 (en) System And Method For Communicating Between Viewers Of A Hierarchical Software Design
JP2022183305A (ja) 情報処理装置、情報処理方法、およびプログラム
US11715278B2 (en) Real time tracking of shelf activity supporting dynamic shelf size, configuration and item containment
US20170061491A1 (en) Product information display system, control device, control method, and computer-readable recording medium
US20150029215A1 (en) Interactive intersection areas
TWI618011B (zh) 在金融機構行銷的處理方法與系統
US10885687B2 (en) Augmented reality consumption data analysis
CN114693335A (zh) 信息处理装置
JP2023064624A (ja) 情報処理装置、画像表示方法、及び画像表示プログラム