ES2818423A1 - Dispositivo expositor para comercio y metodo de procesamiento de imagenes captadas por el mismo - Google Patents

Abstract

Dispositivo expositor para comercio y método de procesamiento de imágenes captadas por el mismo. Dispositivo expositor para comercio que comprende medios de emisión (40) de contenidos multimedia (40a) asociados a un producto (1) ofrecido por el comercio, hacia al menos un cliente (2); medios de captación (41) de imágenes captadas (41a) del entorno físico (3) de dicho comercio; medios de procesamiento (42) de dichas imágenes captadas (41a) de dicho entorno físico (3); además con medios de reconocimiento comportamental (44) de al menos un cliente (2), configurados para el seguimiento de su comportamiento espacial y/o gestual en el entorno físico (3) del dispositivo expositor, así como para el reconocimiento de sus atributos demográficos y/o de su respuesta emocional. Método asociado de procesamiento de imágenes captadas (41a) por dicho dispositivo expositor, de modo que capte información de su entorno físico y la procese de cara a optimizar la información a mostrar para maximizar el interés del cliente por el producto (1) expuesto.

Description

DESCRIPCIÓN

DISPOSITIVO EXPOSITOR PARA COMERCIO Y MÉTODO DE PROCESAMIENTO DE

IMÁGENES CAPTADAS POR EL MISMO

OBJETO DE LA INVENCIÓN

La presente solicitud de patente tiene por objeto un dispositivo expositor para comercio, según la reivindicación 1, así como un método de procesamiento de imágenes captadas por el mismo según la reivindicación 14, incorporando ambos notables innovaciones y ventajas.

ANTECEDENTES DE LA INVENCIÓN

En la actualidad existen una serie de dispositivos expositores para comercios que muestras contenidos multimedia de imagen y sonido, en relación con los productos que se ofrecen en diversos estantes. Dichos contenidos multimedia pueden ser genéricos, en relación con los productos expuestos, o presentar un cierto grado de personalización, en función de tipologías concretas del producto expuesto en dichos estantes, pudiendo también estar en función de la interacción del cliente con el dispositivo, según el interfaz que incluya.

En concreto, es conocido del estado de la técnica, según se describe el documento US10580052B2, sistemas y métodos para controlar unidades de visualización de estantería y para presentar gráficamente información sobre unidades de visualización de estantería. Un sistema incluye una o más unidades de visualización configuradas para acoplarse a los estantes de un sistema de estantería modular, uno o más procesadores acoplados comunicativamente a la una o más unidades de visualización, uno o más componentes de memoria acoplados comunicativamente a uno o más procesadores, y una serie de instrucciones almacenadas en uno o más componentes de memoria. Cuando se ejecutan por uno o más procesadores, las instrucciones hacen que el sistema determine un identificador de producto correspondiente a un producto, identifique una o más unidades de visualización para actualizar en respuesta a la determinación del identificador de producto correspondiente al producto y actualice un gráfico salida de una o más unidades de visualización identificadas para actualizarse en respuesta a la identificación de una o más unidades de visualización para actualizar.

Es también conocido del estado de la técnica, según se describe el documento US7798652B2, pantallas en un área frontal de un panel de visualización, en el que se coloca un artículo. Cada una de las pantallas transmite y proyecta una imagen del proyector de flujo luminoso proyectado desde la parte posterior de las pantallas hacia la parte frontal de las pantallas. Cuando el flujo luminoso de la imagen del proyector se proyecta desde la parte posterior de las pantallas, cada una de las circunferencias internas define un espacio de proyección de imagen para llevar el flujo luminoso de la imagen del proyector a la parte posterior de las pantallas sin obstrucción. Un estante de exhibición puede tener un proyector y una computadora. El proyector proyecta el flujo luminoso de la imagen del proyector. El estante de la pantalla puede tener un espejo reflector que conduce el flujo de imagen del proyector a las pantallas.

A la vista de lo anterior se observa una necesidad de presentar un dispositivo expositor que capte información de su entorno físico y la procese de cara a poder optimizar a tiempo real la estimulación a mostrar en dicho expositor inteligente al objeto de maximizar el interés de los potenciales clientes presentes frente al dispositivo expositor en los productos expuestos.

DESCRIPCIÓN DE LA INVENCIÓN

La presente invención consiste en un dispositivo expositor para comercio, y en un método asociado de procesamiento de imágenes captadas por el mismo. Dicho dispositivo expositor integra una capa o nivel de procesamiento de estimulación y una capa o nivel de procesamiento de sensorización, o de detección por medio de sensores, de modo que se puede personalizar en tiempo real la información presentada en dicho expositor inteligente al objeto de maximizar el interés de los consumidores en los productos expuestos, utilizando adicionalmente los datos previos obtenidos del comportamiento de esos u otros clientes.

En concreto, el dispositivo expositor para comercio de la presente invención que comprende medios de emisión de contenidos multimedia asociados a un producto ofrecido por el comercio, hacia al menos un cliente de dicho comercio; medios de captación de imágenes captadas del entorno físico de dicho comercio; medios de procesamiento de dichas imágenes captadas de dicho entorno físico; comprendiendo adicionalmente medios de reconocimiento comportamental, o de comportamiento, de al menos un cliente presente en dicho comercio, configurados para el seguimiento de su comportamiento espacial y/o gestual en el entorno físico del dispositivo expositor, así como para el reconocimiento de sus atributos demográficos y/o de su respuesta emocional. De este modo es posible adaptar dispositivo expositor los contenidos multimedia presentados hacia el cliente del comercio en función de variables correspondientes a dicho cliente, maximizando las posibilidades de captar su interés hacia el producto ofrecido, y de que este le agrade, decidiendo positivamente respecto de su adquisición.

Señalar que los medios de emisión de contenidos multimedia son concretamente medios de proyección de imágenes emitidas, siendo alternativamente medios de emisión de sonido. Precisar que por seguimiento se entiende un rastreo de su posición física, y/o de sus desplazamientos, y por tanto de si realiza o no una parada ante el dispositivo expositor, o de sus movimientos corporales, en concreto de la orientación de su cabeza y de la mirada, o de la expresión facial, en particular y de modo preferente en el entorno físico del dispositivo expositor. Mencionar que por atributos demográficos se ha de entender, de modo general y no limitativo, la edad, el género y la raza. Por otro lado los medios de procesamiento de dichas imágenes captadas comprenden opcionalmente unos medios de selección de imágenes captadas, de entre las imágenes captadas de dicho entorno físico.

Cabe mencionar, respecto de los medios de captación de imágenes captadas, que estos pueden ser únicos, tanto para detectar una interacción con el dispositivo expositor, como para efectuar un reconocimiento facial, como presentar unos primeros medios de captación, específicos para detectar una interacción con el dispositivo expositor, y por otro lado unos segundos medios de captación para efectuar el reconocimiento facial.

Ventajosamente, el dispositivo expositor para comercio comprende específicamente unos medios de detección de la interacción del cliente con dicho dispositivo expositor, de modo que el dispositivo expositor reacciona mostrando unos u otros contenidos multimedia en función de las indicaciones del cliente, personalizando la información a las inquietudes del cliente concreto que está accionando los comandos del dispositivo expositor.

Opcionalmente los medios de captación de imágenes captadas comprenden unos medios de detección de la interacción tales como una primera cámara para detectar interacción, habiendo, preferentemente, por otro lado, una segunda cámara para detectar y registrar el comportamiento o la conducta del cliente, efectuando un reconocimiento comportamental, o del comportamiento.

Por otro lado, los medios de reconocimiento comportamental de al menos un cliente presente en dicho comercio, están configurados para el seguimiento y/o rastreo de la interacción del cliente con los objetos dispuestos o producto en el dispositivo expositor, es decir, de si coge o deja un producto, y el tiempo que lo tiene en la mano, estando también y/o alternativamente configurados para el seguimiento y/o rastreo de la interacción del usuario con unos medios de proyección táctiles integrados en el dispositivo expositor.

En una realización preferida de la invención, los medios de emisión de contenidos multimedia del dispositivo expositor son una pantalla táctil, siendo dicha pantalla táctil interactuable táctilmente por el cliente, de modo que éste puede seleccionar las opciones informativas que más sean de su interés a la vista de los productos expuestos.

Según otro aspecto de la invención, el dispositivo expositor puede comprender opcionalmente al menos un marco de infrarrojos configurado para la detección del paso de algún elemento físico a su través. De este modo el dispositivo expositor queda habilitado para reconocer la acción del cliente de aproximar su mano, u otro objeto, al producto expuesto, o a la pantalla del dispositivo expositor donde se presente información sobre el mismo. Dicho marco de infrarrojos es opcional capaz de detectar la posición o coordenadas, por las cuales se ha traspasado el marco de infrarrojos. Alternativamente dicho marco de infrarrojos, puede estar colocado de modo adyacente a una superficie acristalada o a una pantalla, dotando de la prestación de tactilidad a la misma, en el sentido de tener la capacidad de detección de un objeto que se aproxima hasta tocar la superficie acristalada.

En una realización preferida de la invención, los medios de emisión de contenidos multimedia y/o los medios de captación de imágenes captadas y/o los medios de procesamiento de dichas imágenes captadas, están conectados a unos medios de control, de modo que puede efectuarse una gestión regulada de dichos recursos, bajo unos parámetros programados con antelación.

Señalar que dichos medios de control se encuentran opcionalmente localizados en un servidor remoto. Por otro lado los medios de emisión de contenidos multimedia y/o los medios de captación de imágenes captadas y/o los medios de procesamiento y/o medios de control se encuentran opcionalmente conectados a una base de datos, bien en local o bien en remoto. La conexión a los medios de control es preferentemente por medio de un router o módem 4G estableciendo la conexión a través de internet, beneficiándose de las prestaciones y ventajas de dicha infraestructura.

Según otro aspecto de la invención, los medios de emisión de contenidos multimedia asociados a un producto son, opcionalmente, al menos un dispositivo de representación de realidad virtual, de modo que el cliente puede recibir información del producto de un modo más completo y detallado, recreando antes sus ojos un entorno físico diferente al real. El dispositivo de representación de realidad virtual muestra información asociada al producto seleccionado, bien por medio de una interfaz táctil exterior, o bien directamente cogiendo el producto.

Complementariamente, el dispositivo expositor para comercio comprende al menos una estructura de soporte que está configurada para el apoyo de al menos un producto de dicho comercio, de modo que dicho producto queda colocado de modo seguro frente al cliente, pudiendo este opcionalmente, tomarlo y volverlo a dejar en su sitio.

Más concretamente, el dispositivo expositor comprende, opcionalmente, al menos una antena RFID configurada para establecer una conexión inalámbrica con al menos una etiqueta RFID ubicada en el producto, de modo el dispositivo expositor puede detectar la acción de coger el producto por parte del cliente, desencadenando opcionalmente la presentación concreta de contenidos multimedia.

Hay que señalar que la antena RFID está ubicada en una estructura de soporte del dispositivo expositor, preferentemente en una zona de apoyo para dicho producto. Opcionalmente comprende una antena RFID común para todos los productos del dispositivo expositor, y alternativamente comprende una antena RFID individual para cada zona de apoyo de cada producto. Con esta última opción de una antena RFID individual para cada zona de apoyo de cada producto la fiabilidad de detección de la acción de tomar el producto es mayor.

Ventajosamente, el dispositivo expositor comprende medios de iluminación del producto en su zona de apoyo sobre la estructura de soporte, de manera que la visibilidad de los detalles del producto por parte del cliente es mayor. Opcionalmente los medios de iluminación son unos diodos LED RGB configurados para ser controlados por unos medios de control, de manera que es posible seleccionar y variar el color de la luz emitida sobre el producto.

En una realización particular de la invención, el dispositivo expositor comprende una estructura de soporte en posición substancialmente horizontal, y medios de emisión de contenidos multimedia en posición substancialmente vertical, de modo que los contenidos multimedia se muestran en la orientación más adecuada, de acuerdo a la dirección de una mirada substancialmente horizontal del cliente hacia el producto colocado, habitualmente verticalmente, sobre la estructura de soporte. Mencionar que los medios de emisión de contenidos multimedia son concretamente medios de proyección de imágenes emitidas, ubicados preferentemente por detrás de la estructura de soporte, entendiéndose por detrás como en un plano posterior, según la dirección de observación del cliente.

En otra realización particular de la invención, el dispositivo expositor comprende una estructura de soporte en posición substancialmente horizontal, y medios de emisión de contenidos multimedia en posición substancialmente horizontal, de modo que los contenidos multimedia se muestran en la orientación más adecuada, de acuerdo con la dirección de una mirada substancialmente vertical de arriba abajo del cliente hacia el producto colocado, sobre la estructura de soporte. Mencionar que, en esta realización particular, la estructura de soporte puede ser substancialmente transparente, concretamente un cristal, y los medios de emisión de contenidos multimedia, preferentemente medios de proyección de imágenes emitidas, están ubicados por debajo de la estructura de soporte. Opcionalmente la estructura de soporte es la propia superficie de los medios de proyección de imágenes emitidas.

En otra realización particular de la invención, el dispositivo expositor comprende medios de emisión de contenidos multimedia asociados a un producto, en posición substancialmente vertical y al menos una pantalla táctil configurada para la interacción con el cliente, de modo que el cliente puede operar con la pantalla táctil, influyendo en los contenidos multimedia recibidos, en relación al producto de su elección.

Opcionalmente, dicha pantalla táctil se encuentra localizada por debajo de medios de emisión de contenidos multimedia y en posición inclinada, substancialmente perpendicular a la dirección de la mirada de un cliente situado frente al dispositivo expositor. De este modo se puede diseñar de modo autónomo el menú de opciones hacia el cliente, y los contenidos multimedia presentados, ofreciendo mayores posibilidades de interacción.

Según otro aspecto de la invención, el dispositivo expositor comprende medios de recogida de datos ambientales en el entorno físico de un dispositivo expositor, en donde los datos ambientales son relativos a al menos una variable del grupo de temperatura, humedad, ruido ambiente y/o iluminación, de modo que se hace posible personalizar adicionalmente los contenidos multimedia presentados hacia el cliente, al tiempo que se puede recabar información de datos ambientales en el entorno físico del dispositivo expositor para procesarlos, eventualmente, de modo centralizado, ante una red múltiple de dispositivos expositores, estableciendo así, una plataforma de recogida de datos ambientales en el entorno de la tienda física, con un número variable de dispositivos expositores, conectados entre sí, por ejemplo a través de internet.

Es también objeto de la presente invención un método asociado de procesamiento de imágenes captadas por un dispositivo expositor para comercio, que comprende las etapas de i) captación de imágenes captadas del entorno físico de dicho comercio; ii) detección de un cliente de dicho comercio; iii) seguimiento de la posición física y/o de los desplazamientos y/o de los movimientos corporales y/o de la expresión facial de dicho cliente del comercio; iv) obtención de una pluralidad de métricas asociadas a la posición física y/o de los desplazamientos y/o de los movimientos corporales y/o de la expresión facial de dicho cliente del comercio; v) determinación del grado de interés del cliente en al menos un producto presentado en el dispositivo expositor en base a dichas métricas. De este modo se hace posible calibrar el interés de un cliente en un determinado producto, mostrando contenidos multimedia concretos, asociados a dicho producto, y también realizar un compendio de la reacción de una multiplicidad de clientes, que se han aproximado a uno o varios dispositivos expositores, o uno o varios comercios.

En una realización preferida de la invención, el seguimiento de los movimientos corporales y/o de la expresión facial del cliente comprende el seguimiento de al menos una variable del grupo de guiñada, cabeceo, balanceo, proximidad y tiempo mirando a unos medios de captación de imágenes captadas. De este modo se hace posible calibrar con mayor precisión el interés cliente con respecto a un determinado producto expuesto.

Más concretamente, la determinación del grado de interés del cliente en al menos un producto presentado en el dispositivo expositor es en base a una combinación lineal del número de paradas con mirada frente al dispositivo expositor, con el número de interacciones con el producto, y con el número de toques en una pantalla táctil y/o con el número de interacciones en un dispositivo de representación de realidad virtual. De este modo el valor cuantitativo de la variable grado de interés del cliente es determinada con una alta precisión, al considerar una pluralidad de factores, todos ellos directamente relacionados con una mayor probabilidad de que el cliente adquiera el producto expuesto.

Señalar que una combinación lineal preferida de las paradas con mirada, ‘picks’, o interacciones con el producto, y ‘clicks’, o número de toques en una pantalla táctil y/o número de interacciones en un dispositivo de representación de realidad virtual, es en concreto el sumatorio de paradas con mirada, más el número de ‘picks’ multiplicado por un factor de 1.5, más el número de ‘clicks' multiplicado por un factor de 2.

Cabe mencionar que la determinación del grado de interés del cliente en al menos un producto presentado en el dispositivo expositor está en función de la localización del dispositivo expositor, de las condiciones ambientales y temporales, calculándose a partir del entrenamiento de algoritmos de 'machine learning' supervisados a la vista de los datos históricos de dicho grado de interés. De este modo el grado de interés del cliente se estima en función de condiciones tales como tipo de audiencia, localización, tomando como base lo sucedido en el pasado.

Complementariamente, la determinación del grado de interés de cada grupo de audiencia, como una pluralidad de clientes, en al menos un producto presentado en el dispositivo expositor está en función de la localización del dispositivo expositor, de las condiciones ambientales y temporales, calculándose a partir del entrenamiento de algoritmos de 'machine learning' supervisados a la vista de los datos históricos de dicho grado de interés.

Alternativamente las interacciones con el producto pueden tener lugar por medio de un dispositivo de representación de realidad virtual, concretamente unas gafas de realidad virtual RV, las cuales pueden mostrar información asociada al producto seleccionado, bien por medio de una interfaz táctil exterior o directamente cogiendo el producto.

En los dibujos adjuntos se muestra, a título de ejemplo no limitativo, un dispositivo expositor para comercio y un método de procesamiento de imágenes captadas por el mismo, constituido de acuerdo con la invención. Otras características y ventajas de dicho dispositivo expositor para comercio y dicho método de procesamiento de imágenes captadas por el mismo, objeto de la presente invención, resultarán evidentes a partir de la descripción de una realización preferida, pero no exclusiva, que se ilustra a modo de ejemplo no limitativo en los dibujos que se acompañan, en los cuales:

BREVE DESCRIPCIÓN DE LOS DIBUJOS

Figura 1.- Vista en esquema de una pluralidad de dispositivos expositores ‘Phygi’ conectados a un servidor en remoto, dotado de inteligencia artificial, de acuerdo con la presente invención;

Figura 2.- Vista en esquema de un diagrama de bloques con un dispositivo expositor, conectado a un servidor y a una base de datos, incluyendo medios de control y de procesamiento de las imágenes captadas, de acuerdo con la presente invención;

Figura 3.- Vista en esquema de unas etiquetas RFID en la proximidad de antenas RFID en conexión con unos medios de control, de acuerdo con la presente invención;

Figura 4.- Vista en perspectiva de un primer modelo del dispositivo expositor, a modo de estantería interactiva, de acuerdo con la presente invención;

Figura 5.- Vista en perspectiva de un segundo modelo del dispositivo expositor, a modo de estantería interactiva, de acuerdo con la presente invención;

Figura 6.- Vista en perspectiva de un tercer modelo del dispositivo expositor, a modo de vitrina, de acuerdo con la presente invención;

Figura 7.- Vista en perspectiva de un cuarto modelo del dispositivo expositor, a modo de tótem de realidad virtual, de acuerdo con la presente invención;

Figura 8.- Vista en perspectiva de una primera implementación del primer modelo del dispositivo expositor, a modo de estantería interactiva, de acuerdo con la presente invención;

Figura 9.- Vista en perspectiva de una segunda implementación del primer modelo del dispositivo expositor, a modo de estantería interactiva, de acuerdo con la presente invención;

Figura 10.- Vista en perspectiva de una implementación de un segundo modelo del dispositivo expositor, a modo de estantería interactiva, de acuerdo con la presente invención;

DESCRIPCIÓN DE UNA REALIZACIÓN PREFERENTE

A la vista de las mencionadas figuras y, de acuerdo con la numeración adoptada, se puede observar en ellas un ejemplo de realización preferente de la invención, comprendiendo las partes y elementos que se indican y describen en detalle a continuación.

Según se puede observar en la figura 1, la invención puede constar de una pluralidad de dispositivos expositores ‘Phygi’, cada cual con su entorno físico (3), conectados a un servidor (8) en remoto, opcionalmente en la nube, dotado opcionalmente de inteligencia artificial. La conexión (82) es habitualmente vía internet (83).

Así pues, en una realización con una pluralidad de dispositivos expositores, hay una infraestructura común para todos, el servidor (8), estando cada unidad o dispositivo expositor conectado por 4G, o sucesivas generaciones de telefonía móvil, a un servidor (8) en la nube, que le indica qué mostrar en cada momento, y donde se envía toda la información captada para ser analizada.

Según se puede observar en el diagrama de bloques de la figura 2, la invención comprende un dispositivo expositor de al menos un producto (1), conectado a un servidor (8) y a una base de datos (81), incluyendo medios de captación (41) de imágenes captadas (41a), así como medios de control (47), medios de procesamiento (42), medios de selección (43) y medios de reconocimiento comportamental (44) y medios de detección de la interacción (45), a través de los cuales se llega a una serie de métricas (91) del grado de interés (92) del cliente (2) con respecto del producto (1), en particular a raíz del cálculo de una combinación lineal (93) de variables detectadas relativas a los movimientos y comportamiento del cliente (2) en el entorno físico (3) del dispositivo expositor.

Según se puede observar en la figura 3, el dispositivo expositor de la invención comprende al menos una etiqueta RFID (73) en la proximidad de al menos una antena RFID (72) en conexión con unos medios de control (47), incluyendo los controladores y drivers propios de dicha antena RFID (72).

En la figura 4 se puede observar, una vista en perspectiva de un primer modelo del dispositivo expositor, a modo de estantería interactiva, incluyendo de modo opcional al menos un foco de luz, preferentemente LED, sobre la pantalla o medios de emisión (40) de contenidos multimedia (40a). El objetivo en dicho primer modelo es destacar productos (1) de alta gama y proporcionar información aumentada de estos, además de mejorar la experiencia de compra.

Así pues puede considerarse una estantería inteligente con la capacidad de incentivar consumo, mejorar la experiencia del cliente (2) y obtener información de su comportamiento como comprador. En dicha realización se incluye una pantalla de 43’’ capacitiva, una cámara RGB-D para detectar la interacción, una cámara RGB para reconocimiento facial y un ordenador para procesar la información. Está pensada para colocar una serie de productos (1), dependiendo de su tamaño, mientras se emiten contenidos multimedia (40a) por los medios de emisión (40) o pantalla. En caso de que el cliente (2) coja un producto (1), la interacción es detectada mediante una cámara con un algoritmo de “computer visión”, o de visión artificial, situada de manera cenital, y se lanza un contenido multimedia (40a) particular además de información aumentada del producto. Comprende una pantalla táctil (40b) interactuable al tener tactilidad. La cámara de reconocimiento facial permite detectar y caracterizar a la audiencia que interacciona con el dispositivo expositor.

Preferentemente el funcionamiento está controlado por una aplicación desarrollada en un motor gráfico que se conecta con la plataforma de gestión y muestra la información de los productos (1) expuestos cuando son cogidos por los clientes (2), reconociendo esta interacción mediante la interacción de una antena RFID (72) y al menos una etiqueta RFID (73). Toda la información de los productos (1) y los contenidos multimedia (40a) están en la base de datos (81), pudiéndose actualizar en cualquier momento de manera centralizada.

En la figura 5 se puede observar una vista en perspectiva de un segundo modelo del dispositivo expositor, también a modo de estantería interactiva, en el que se pueden ubicar uno o varios medios de captación (41) por dispositivo expositor, en la posición superior, en una lateral, o en otra que se estime conveniente. Preferentemente comprende unos medios de iluminación (48) bien en el espacio central, donde se encuentran los medios de emisión (40) de contenidos multimedia (40a), si bien es más habitual que dichos medios de iluminación (48) estén localizados en las celdas contiguas, también con productos (1), pero sin medios de emisión (40) de contenidos multimedia (40a), a modo de sustitución de los mismos. Opcionalmente comprende un marco de infrarrojos (5) en el borde exterior del espacio central con los medios de emisión (40) de contenidos multimedia (40a).

Mencionar que dicho segundo modelo de dispositivo expositor, se concreta preferentemente en una estantería vertical múltiple, donde destacar una gama amplia de productos (1) en un espacio de venta. Igualmente presenta como objetivo el incentivar consumo, mejorar la experiencia del cliente (2) y obtener información de su comportamiento. Se incluye unos medios de emisión (40) de contenidos multimedia (40a), concretamente una pantalla de 65’’, colocada en el fondo en orientación vertical, sobre la que se colocan los productos (1) delante en baldas. Delante de la pantalla y los productos (1), se coloca, opcionalmente, y como alternativa a la tecnología de detección RFID, un marco de infrarrojos (5) para detectar cuándo un cliente (2) introduce la mano, o elemento físico (51), para coger un producto (1). Esta interacción produce un cambio en los contenidos, dar información del producto (1) con el que se ha interactuado y creando una experiencia alrededor de la compra. Además, y de modo preferente, dispone de unos medios de captación (41), concretamente una cámara de reconocimiento facial para detectar la audiencia y caracterizarla.

Preferentemente el funcionamiento del modo dispositivo expositor como estantería vertical múltiple, está controlado, al igual que la realización de la figura 4, por una aplicación desarrollada en un motor gráfico con prestaciones similares.

En la figura 6 se puede observar, una vista en perspectiva de un tercer modelo del dispositivo expositor, a modo de vitrina, la cual puede ser horizontal o vertical, si bien se muestra el caso horizontal, como realización preferente. La diferencia con los modelos de las figuras 4 y 5 es que esta emplea una superficie exterior de cristal que protege el producto (1) e imposibilita el acceso directo del cliente (2). Dicha superficie exterior de cristal se puede dotar de prestaciones interactivas, al colocar un marco de infrarrojos (5) ubicado en su perímetro.

Así dicho modelo de dispositivo expositor, según la figura 6, puede calificarse como vitrina digital interactuable. En el fondo de la vitrina, se coloca unos medios de emisión (40) de contenidos multimedia (40a) o pantalla de 43’’ que mejora la experiencia de compra del producto (1). Encima de dicha pantalla se colocan productos (1) que quieren ponerse en exposición. Un ejemplo claro son relojes caros o joyería, que no está accesible por el consumidor o cliente (2) directamente. Como se ha dicho, en el cristal situado en la parte superior de la vitrina, se coloca un marco de infrarrojos (5), dotando de tactilidad a este, consiguiendo de este modo que la pantalla sea interactuable mediante el cristal superior, creando un efecto experiencial positivo hacia el cliente (2). Dicho modelo está más orientado hacia artículos de lujo, expositores de ferias, eventos, etc. Al igual que los modelos de figuras anteriores, dispone de una cámara de reconocimiento facial para detectar la audiencia y caracterizarla.

Preferentemente el funcionamiento del modo dispositivo expositor como estantería vertical múltiple, está controlado, al igual que la realización de las figuras 4 y 5, por una aplicación desarrollada en un motor gráfico con prestaciones similares, conectando con la plataforma de gestión y mostrando la información de los productos (1) expuestos cuando son cogidos por los clientes (2). En este caso, sin embargo, la interacción se consigue a partir de tocar en la parte superior de la vitrina, ya que los productos no pueden ser cogidos. Toda la información de los productos (1) y los contenidos multimedia (40a) puede estar de igual modo en la base de datos (81) y se puede actualizar en cualquier momento de manera centralizada.

En la figura 7 se puede observar, una vista en perspectiva de un cuarto modelo del dispositivo expositor, a modo de tótem de realidad virtual, incluyendo opcionalmente uno o varios medios de captación (41). Como elemento tecnológico adicional se incluye un dispositivo de representación de realidad virtual (6), concretamente unas gafas de realidad virtual, soportadas en una base que posibilita su carga eléctrica por contacto, al mismo tiempo que las sostiene. Adicionalmente dispone de una alarma que salta si el cliente (2) se separa por ejemplo más de 3 metros del dispositivo expositor avisando por ejemplo previamente a los 2 metros.

Como se puede observar en la figura 7, el diseño es una variante distinta a las anteriores, en la idea de llegar a una tipología de dispositivo expositor que acerque el uso natural y sencillo de la realidad virtual en espacios públicos, como puede ser una tienda, un museo o unas instalaciones de una empresa, en una funcionalidad de como tótem experiencial o como tótem para realizar formación por realidad virtual. Se incluye una pantalla táctil (40b) donde seleccionar las experiencias, y preferentemente varios dispositivos de representación de realidad virtual (6), o gafas de RV, para ser utilizadas por los clientes (2). Dichas gafas de RV están diseñadas para mostrar imágenes o video, opcionalmente a 360°, y/o mostrando escenarios 3D

Al igual que en los modelos de las figuras anteriores, la funcionalidad está gestionada por una aplicación desarrollada en un motor gráfico que se conecta con la plataforma de gestión, ubicada opcionalmente de modo remoto en un servidor (8) y en una base de datos (81), estableciendo comunicación por medio de una conexión (82) vía internet (83).

La información de los contenidos multimedia (40a) y de realidad virtual se cargan a través de dicha plataforma, como videos turísticos en función del lugar, imágenes de coches o cualquier otro producto (1) o servicio que quiera ser expuesto. De igual modo toda la información está en la base de datos (81) y se puede actualizar en cualquier momento de manera centralizada.

Señalar que dicho modelo de dispositivo expositor tipo tótem presenta de modo preferente una pantalla superior, como medios de emisión (40) de contenidos multimedia (40a), y una pantalla inferior táctil destinada a la interacción con el cliente (2), la cual que muestra los productos (1) y/o experiencias a ser visualizadas. Concretamente se ha de arrastrar las experiencias al icono representativo de cada gafa de RV, quedando dicha gafa de RV lista para visualizar la experiencia.

En la figura 8 se puede observar, un primer ejemplo de implementación del primer modelo del dispositivo expositor, a modo de estantería interactiva, en concreto presentado productos (1) vitivinícolas.

En la figura 9 se puede observar, un segundo ejemplo de implementación del primer modelo del dispositivo expositor, a modo de estantería interactiva, en concreto presentado productos (1) de calzado deportivo, con un cliente (2) tomando un producto (1), al tiempo que los medios de captación (41) de imágenes captadas (41a) correspondientes a un cliente (1) realizan su función, posibilitando así mejorar la experiencia de compra.

En la figura 10 se puede observar, un ejemplo de implementación del segundo modelo del dispositivo expositor, a modo de estantería interactiva, opcionalmente sin estructuras de soportes (7), en concreto presentado productos (1) de interiorismo, con un cliente (2) tomando un producto (1), al tiempo que los medios de captación (41) de imágenes captadas (41a) correspondientes a un cliente (1) realizan su función, posibilitando así mejorar la experiencia de compra.

En relación a otros aspectos más de detalle de la presente invención, hay que mencionar que dicho dispositivo expositor integra una capa o nivel de procesamiento de sensorización, o de detección por medio de sensores, orientado en primer lugar al control de la audiencia, por medio de visión por ordenador, y en segundo lugar al control de la interacción, por medio de la identificación RFID e interacciones con las pantallas del dispositivo expositor.

En el control de la audiencia, de la visión por ordenador se obtienen una serie de métricas (91) por cada usuario cliente (2). El sistema comprende varios procesos en serie: detección, tracking o seguimiento, y obtención de métricas (91). La detección se lleva acabo preferentemente con una librería llamada OpenVINO, desarrollada por Intel Corporation. Mencionar que se utilizarán modelos de detección facial, por ejemplo los relativos a género, edad y/o estado emocional. En cuanto al tracking o seguimiento, se asigna un identificador único y consistente a cada usuario cliente (2). El procesamiento temporal de las distintas variables obtenidas anteriormente o métricas (91), se asocian a un sujeto identificado como usuario cliente (2), para su seguimiento. Los algoritmos de seguimiento se construyen de forma secuencial con el objetivo de no perder el seguimiento del sujeto identificado como usuario cliente (2).

En cuanto a la obtención y procesamiento de métricas (91), como variables correspondientes a cada sujeto de la audiencia, o grupo de usuarios clientes (2) en un determinado entorno físico (3), comprenden preferentemente a) tres ángulos distintos de orientación facial, como son la guiñada, el cabeceo y el balanceo); b) la proximidad al dispositivo expositor; y c) si usuario cliente (2) ha estado mirando a cámara. Las métricas (91) por usuario cliente (2) quedan registradas en una base de datos (81.)

En relación a la arquitectura de la sensorización, la detección se lleva a cabo con un algoritmo de visión por ordenador, cuyo input o entrada es, una cámara RGB, o medios de captación (41), y cuyo output o salida es lo denominado Raw Data 1, o datos sin procesar 1, según se observa en la figura 2. A continuación, y en cuanto al tracking o seguimiento, el Script python 1, o algoritmo SmartShelf del dispositivo expositor genera Raw Data 2, o datos sin procesar 2, a partir de Raw Data 1. Subsiguientemente tiene lugar la obtención y procesamiento de métricas (91). El Script python 2, o algoritmo Servidor, presente en el servidor (8), procesa los datos subidos y genera un conjunto de métricas (91) procesadas y clasificadas. Adicionalmente efectúa la subida de los datos procesados a la base de datos (81), preferentemente de tipo SQL.

Cabe mencionar que para medir el comportamiento del consumidor o cliente (2), se ha desarrollado una capa de análisis de la audiencia del dispositivo expositor, o estantería inteligente, mediante visión por computador. Esta se ha desarrollado para analizar videos a tiempo real, aunque permite su aplicación en post-proceso para analizar videos ya captados con el objetivo de diagnosticar posibles errores y mejorar la solución. El análisis consiste en la obtención de distintas métricas (91) por cada usuario o cliente (2) que haya aparecido en el vídeo en un espacio concreto de tiempo. Como se ha señalado, el sistema desarrollado tienes procesos en serie, concretamente los de detección, tracking o seguimiento y obtención de métricas.

Más específicamente al respecto del proceso de detección, se utilizan distintos modelos de Machine Learning, o aprendizaje automático, específicamente Deep Learning, entre otros los que pueden realizar detección de coches y de lectura de matrícula automática, detección de personas o detección de caras. Estos modelos funcionan a tiempo real, tanto para un vídeo como para una imagen. En este caso se utilizarán modelos de detección facial como la detección de edad y género, el estado de ánimo de una persona o la orientación de su cabeza. Se obtienen así una serie de medidas relacionadas con el género, edad, estado emocional (feliz, neutro, triste, enfadado o sorprendido) y la orientación de la cabeza de cada sujeto o cliente (2). También se ha incorporado un modelo el cual detecta el tamaño y posición de una cara humana, sobre el vídeo estudiado, según un cuadrado.

Cabe señalar que los modelos de detección facial analizan cada imagen de forma independiente, por lo que no pueden conseguir el seguimiento de las personas o clientes (2). Detectando caras en un instante determinado, pero sin que un identificador permita identificar la misma cara entre fotogramas, podemos saber cuántas caras (y por extensión personas o clientes (2) hay en cada momento, pero no cuántas caras diferentes han pasado durante un espacio de tiempo. Por lo tanto, se hace necesario la implementación de un algoritmo que realice un tracking o seguimiento, es decir, que permita asignar un identificador único y consistente a las personas o clientes (2) durante el tiempo.

A partir de lo anterior se obtiene una secuencia de datos de las distintas detecciones a tiempo real. La frecuencia de detección es aproximadamente de 25 Hz-20 Hz, la variación depende del número de sujetos o clientes (2) en la escena o entorno físico (3). Así cuantos más sujetos o clientes (2), más procesamiento y por tanto la frecuencia disminuye. Las detecciones se van guardando a tiempo real en un formato tabla. Para que los videos a analizar no sean muy largos, la captación continua desde la cámara o medios de captación (41) se segmenta en sesiones, que quedan definidas desde que una persona o cliente (2), entra en escena hasta que no se detecta ninguna cara durante 1 segundo. Cuando ocurre esto, la detección durante esta sesión se exporta, preferentemente en formato Excel, para su posterior procesamiento. Al objeto de evitar que el procesamiento de un vídeo o sesión sea muy largo, se estipula que pasados tres minutos de detección ininterrumpida, se corte la detección guardando los datos de la sesión de tres minutos y reiniciando el algoritmo de detección automáticamente. Dicho datos quedan guardados en un formato temporal donde a cada dato se le asigna el tiempo en el que ha sido obtenido sin que tenga una coherencia con el sujeto o cliente (2) sobre el que se ha realizado una medición en concreto. Para esto se emplea el segundo algoritmo de procesamiento: el de tracking o seguimiento.

En cuanto al segundo algoritmo o algoritmo tracking o seguimiento, éste trata el procesamiento temporal de las distintas variables obtenidas anteriormente asociándolas a un sujeto o cliente (2) identificado con un número entero único en la sesión. Para hacer esto se utilizan una serie de algoritmos concatenados de seguimiento del sujeto o cliente (2), al objeto de asociar las variables obtenidas del primer algoritmo a los sujetos o clientes (2) en la escena o entorno físico (3). Estos algoritmos básicamente estudian la evolución de la posición los sujetos conforme se desplazan. Se asocia a cada sujeto inicial un identificador único durante toda la sesión. Comparando dos conjuntos de datos temporalmente seguidos, se asocian los identificadores iniciales a los más cercanos en el conjunto de datos siguiente. Esta asociación de identificadores no solamente se hace a través de algoritmos de proximidad; se utilizan otros que tienen en cuenta, por ejemplo, la velocidad de los sujetos o clientes (2), y el flujo óptico.

Como se ha mencionado, estos algoritmos de seguimiento se construyen de forma secuencial, es decir, primero los datos pasan por un primer algoritmo, estos resultados se procesan por un segundo algoritmo, etc. Se han implementado también modelos de aprendizaje máquina de regresión que basan su conocimiento en el desplazamiento del sujeto o cliente (2), durante la sesión para después predecir su posición un determinado tiempo después con tal de no perder el seguimiento de esta persona. Esto permite por ejemplo que, si un sujeto se deja de detectar durante un cierto tiempo en la escena y después vuelve a detectarse, no se pierda su seguimiento. Es decir, se interpola la futura posición del sujeto o cliente (2) para continuar con su seguimiento. Además, también se impide explícitamente que dos sujetos distintos puedan tener el mismo identificador, por ejemplo a consecuencia de que dos sujetos o clientes (2) se crucen durante un intervalo de tiempo largo, pudiendo originar que el algoritmo asigne el mismo identificador a dos sujetos o clientes (2). Para ello se revisan los sujetos o clientes (2) con un mismo identificador, asignando el identificador repetido a aquel sujeto o cliente (2) que ha tenido una trayectoria lo más parecida posible a la predicción realizada.

A continuación, se pasa a la tercera fase de procesamiento, calculando una serie de métricas (91) que analicen la audiencia a lo largo de la sesión, consiguiendo así la edad media, género y estado emocional medio, entre otras variables, de cada sujeto o cliente (2). Se realizan análisis también que contabilizan el número de veces que un sujeto o cliente (2) se ha parado, se ha situado a la izquierda o a la derecha según el sistema de referencia del vídeo o se ha acercado a menos de una distancia de dos metros.

Para la obtención de estas métricas (91) se han realizado estudios previos más detallados sobre los vídeos ya grabados o sobre sesiones a tiempo real donde se estudian una serie de parámetros que marquen límites entre por ejemplo cerca o lejos, o si el sujeto o cliente (2) mira o no mira dentro de un cierto rango. Para esto se procesan los datos de la orientación de la cabeza del sujeto o cliente (2), la cual nos marca tres ángulos distintos denominados como guiñada, cabeceo y balanceo. Dichos ángulos se calibran estudiando distintos vídeos y con ello se marca un umbral de cuando un sujeto o cliente (2) está mirando dentro de un cierto rango espacial como zona de interés del entorno físico (3). Lo mismo se hace para la distancia a la que se encuentra el sujeto o cliente (2). La cámara o medios de captación (41) que consigue la grabación de vídeos, no tiene una componente de profundidad, lo que nos devuelve unos datos que se encuentran sobre una imagen plana realmente, sin sentido de la profundidad. Pese a esto, se consigue establecer un parámetro que marque la proximidad de un sujeto o cliente (2) respecto de la cámara o medios de captación (41), segmentando así la posición del sujeto o cliente (2) en cerca y lejos.

Al respecto de las medidas detectadas sobre las caras de los sujetos o clientes (2), se puede establecer una variable adicional que evalúa si una persona ha estado mirando un cierto tiempo dentro de un ángulo de visión durante la sesión. Sí lo ha estado haciendo, las métricas (91) relacionadas con este sujeto o cliente (2) se obtienen durante el tiempo de visión, eliminando los registros donde no ha estado mirando. Así, la información derivada de estos sujetos o clientes (2) vendrá obtenida sólo de instantes de tiempo donde dicho sujeto o cliente (2) ha estado mirando a cámara o medios de captación (41), y por tanto, esas variables son mucho más robustas que las que se puedan obtener promediando sobre toda la sesión. Métricas (91) más complejas han sido estudiadas también como por ejemplo la secuencia de movimientos de un sujeto o cliente (2). Esta secuencia marca el orden de acciones que realiza dicho sujeto o cliente (2) diferenciando entre acercarse, alejarse, izquierda y derecha y mirar o no mirar. Esto permite agrupar a los sujetos o clientes (2) de una misma sesión según patrones de movimiento.

El conjunto de variables anteriormente descritas queda agrupado y resumido en una tabla que se guarda automáticamente en una base de datos (81), registrándose como un análisis por sujeto o cliente (2) de una sesión. Un tercer procesado de datos, dentro del mismo algoritmo, realiza el análisis por sesión informando así, por ejemplo, del número de hombres y mujeres que han participado en la misma.

Alternativamente se establece que los diversos algoritmos funcionen de forma paralela de modo que se consiga al mismo tiempo la toma de datos del primer algoritmo y el procesamiento de datos por el segundo algoritmo de datos ya guardados. Dado que el segundo algoritmo de procesamiento necesita normalmente más tiempo que el primero, todos los datos a procesar quedan guardados y registrados en un historial en la base de datos (81).

Finalmente los datos que pertenecen a las métricas (91) por usuario o cliente (2) quedan registrados en la base de datos (81) al objeto de poder mostrar gráficamente los resultados conseguidos, y generar informes. Además, dichos algoritmos son un único programa que pueden funcionar en un único núcleo del ordenador, haciendo posible que el algoritmo se ejecute en tantos núcleos como tenga el ordenador, doblando o cuadriplicando su velocidad.

En relación al control de la interacción del cliente (2) con el dispositivo expositor, se considera en primer lugar las interacciones con las pantallas táctiles (40b), mediante leves pulsaciones o toques, relacionándolo con cada producto (1), y dando lugar a la generación de métricas (91), por ejemplo con el n° de toques. En segundo lugar se considera la tecnología de identificación por radio frecuencia o RFID, opcionalmente con sensores RFID HF, y alternativamente con sensores RFID UHF, integrados en el dispositivo expositor: Los productos (1) comprenden un tag o etiquetas RFID (73) que hace posible saber a través del sensor si una etiqueta se quita del campo abarcable de la antena RFID (72) o si se vuelve a dejar en la posición inicial.

En cuanto a la arquitectura relativa al control de la interacción del usuario o cliente (2), se incluye de modo preferente, un controlador de antena, opcionalmente del tipo (XN), conectado a unos medios de control (47) o unidad de control (Raspberry) que es el dispositivo que almacena el algoritmo para traducir las señales y mandar los eventos correspondientes al ordenador que almacena la aplicación encargada de mostrar las acciones por pantalla o medios de emisión (40). Cuenta por otro lado con tags en los productos, o etiqueta RFID (73), y antenas RFID (72), con un driver o controlador específico, conectado a los medios de control (47) o unidad de control (Raspberry). A su vez se encuentra preferentemente conectado a un router 4G mediante el cual se conecta el ordenador contenedor encargado de lanzar la aplicación.

Las pantallas utilizadas para captar la interacción con el usuario o cliente (2) son táctiles, de cara a recibir inputs o entradas basadas en la interacción de cada usuario o cliente (2) con la pantalla táctil (40b), relacionándolo con cada producto (1). Todo ello queda recogido en la aplicación, generándose métricas (91) representativas del grado de interés, como por ejemplo el número de veces sobre el que se pincha o pulsa cada pestaña de información relativa a cada producto (1).

Señalar que, de modo preferente, ha de haber una distancia mínima entre antenas RFID (72) para evitar que se produzcan interferencias y detecciones erróneas. Dicha distancia mínima ha de ser de 8,5 cm horizontalmente y de 6 cm verticalmente para no causar interferencias tampoco con el metal integrante del dispositivo expositor.

Mencionar también que cada antena RFID (72) presenta un rango específico de detección, por lo que, a la hora de instalar los componentes, es necesario contemplar que la distancia del tag o etiqueta RFID (73) a la antena RFID (72) está dentro de su rango de detección. Específicamente la distancia máxima es de 2,2 cm.

Por otro lado, los controladores de las antena RFID (72) se conectan directamente a los medios de control (47) que es el dispositivo que almacena el algoritmo para traducir las señales y mandar los eventos correspondientes al ordenador que almacena la aplicación encargada de mostrar las acciones por los medios de emisión (40) o pantalla. El sistema de envíos se realiza a través de MQTT (Message Queing Telemetry Transport, o Transporte de telemetría de cola de mensajes), que es un protocolo de comunicación M2M (machine to machine). Este protocolo está basado en una pila TCP/IP y cada conexión se mantiene abierta.

Dicho sistema se conecta a un router 4G mediante el cual se conecta el ordenador contenedor encargado de lanzar la aplicación que interpretará los mensajes MQTT recibidos por los medios de control (47) para utilizarlos. En este caso la aplicación está desarrollada en un motor gráfico, que recibirá mensajes a través de MQTT a medida que se vayan registrando las interacciones y las traducirá en diferentes situaciones en los medios de emisión (40) o pantalla.

En relación a aspectos adicionales de la presente invención, en concreto el de representación y visualización de métricas (91), y tablas virtuales que muestran datos de interés, cabe mencionar que, con el fin de extraer información de interés concerniente a la representación y visualización de métricas (91), se han desarrollado diferentes vistas en SQL Server. Se trata de tablas virtuales que muestran datos procedentes de una o varias tablas y cuyo contenido viene definido por una consulta SQL. De esta forma, se sintetizan y unifican datos necesarios para obtener una perspectiva completa y coherente del conjunto de datos que se quiere mostrar al usuario o cliente (2), para aquellas tablas en las que no se puede extraer directamente la información deseada de la estructura con la que se ha sido almacenada. El objetivo es evitar, en la medida de lo posible, realizar esta consolidación de datos dentro de una herramienta que se utiliza para visualizar la información, preferentemente un servicio de visualización avanzada de datos, a fin de maximizar el rendimiento en la ejecución de dicha aplicación.

Para representar de forma visual fragmentos de información y datos de interés se ha utilizado una herramienta que se utiliza para visualizar la información, permitiendo hacer uso de diferentes orígenes de datos, y mostrarlos gráficamente de manera interactiva. El flujo para la creación de informes y su posterior visualización online, pasa por el uso de una aplicación de escritorio para el servicio de visualización avanzada de datos, donde a) se establecen las conexiones con el origen de datos, y b) se crea el informe, permitiendo a los usuarios finales o clientes (2) acceder e interactuar con la información de modo online.

Básicamente, una vez generado el informe en un servicio de visualización avanzada de datos, éste se publica dentro de un área de trabajo, donde se pueden, compartir informes, paneles, conjuntos de datos, etc. con los usuarios finales o clientes (2), por medio de la conexión con SQL Server.

En cuanto a los mecanismos de conexión a los datos se implementa el de importación o carga de todo el modelo de datos en memoria, al ofrecer mayor flexibilidad, tanto en manipulación de datos como en la implementación de cálculos. Se obtiene un mayor rendimiento ya que al realizar una actualización de los datos, estos se almacenan en la memoria de la capacidad del servicio de visualización avanzada de datos, permitiendo realizar consultas de forma más rápida; y, por último, se utiliza un único origen de datos. El conjunto de datos representados no está actualizado en tiempo real aunque se pueden programar múltiples actualizaciones que se ejecutarán en el transcurso del día.

En cuanto al diseño y contenido del informe, como el conjunto de datos que se quiere representar, asociad a la información de una campaña concreta, se puede distinguir tres bloques diferentes: a) un panel de filtros aplicables a la pestaña actual. Esta área permite segmentar la información visualizada, limitando el conjunto de datos que son representados en el área de visualización; b) un área de visualización de la información extraída un conjunto de datos, pudiendo contener uno o más objetos visuales. Y c) un logo corporativo.

Ventajosamente, el informe comprende diferentes pestañas siendo las principales las siguientes:

I) Pestaña ‘Localización’: Muestra los principales indicadores, así como la geolocalización de los diferentes dispositivos expositores. Incluye visualmente diferentes objetos informativos tales como i) la fecha, permitiendo acotar los datos visualizados dentro de un rango de tiempo; ii) la localización, limitando el conjunto de datos representados según la ubicación de los dispositivos expositores que forman parte de la campaña comercial, presentando múltiples campos informativos, tales como comunidad autónoma, provincia, municipio, establecimiento o superficie en la que se encuentra el dispositivo; iii) visualización de métricas (91), a modo de indicadores relativos a la eficacia y a la productividad del dispositivo expositor; iv) mapa de localización, mostrando la geolocalización del establecimiento donde están ubicados los diferentes dispositivos expositores. Un recurso gráfico es el tamaño del círculo, con el que se especifica su situación geográfica dentro del mapa, y representa la audiencia potencial media diaria, es decir, la media de visitas diarias en el rango de tiempo seleccionado; v) comparadores de métricas (91) en forma de tablas, permitiendo obtener una visión el estatus del día actual en comparación con los resultados anteriores.

II) Pestaña ‘Tráfico’: Muestra el volumen de tráfico, así como otras características, que se pueden extraer del análisis de la audiencia. Incluye visualmente diferentes objetos informativos tales como i) Fecha; ii) Localización; iii) Género; iv) Edad, filtrando la información representada en el área de visualización de métricas (91) según el rango de edad de los sujetos, preferentemente < 18; 19-30; 31-45; 46-55; 56-65; o >65; v) Distancia; vi) Oportunidades de compra, mostrando de manera gráfica, el comportamiento de potenciales compradores o clientes (2). Representa el porcentaje de pérdidas de posibles clientes (2) que muestran interés y, que finalmente cumplen el objetivo de negocio, es decir que miran y paran; vii) Promedios de oportunidades de compra, representando, numéricamente, los datos mostrados en el embudo de oportunidades de compra, y además, añadiendo información sobre la duración media por visita en los diferentes puntos del embudo; viii) Tráfico total diario, con la evolución diaria del volumen total de potenciales clientes (2); ix) Tráfico en función de la distancia, con el porcentaje de visitas que pasan cerca o lejos del dispositivo expositor.

III) Pestaña ‘Flujo’: Muestra una visión del volumen total de visitas de clientes (2), a través de los diferentes comportamientos mencionados anteriormente de visita - visita y mira -visita, mira y para, atendiendo a una segmentación horaria, según día de la semana, así como de género. Incluye visualmente diferentes objetos informativos tales como i) Tráfico medio diario por hora; ii) Tráfico medio diario según día de la semana; ii) Tráfico en función del género.

IV) Pestaña ‘Perfil comprador’: Muestra información sobre características demográficas de los potenciales compradores o clientes (2) permitiendo precisar objetivos. Incluye visualmente diferentes objetos informativos tales como i) Edad; ii) Género; iii) Pirámide de población, permitiendo analizar de manera conjunta las características demográficas tanto de género como de edad.

V) Pestaña ‘Emociones’: Muestra, además de rasgos demográficos, la respuesta emocional. Establece en base a la probabilidad de que se dé una de las emociones registradas, el porcentaje de tiempo en el que un comprador ha experimentado mayoritariamente una emoción del tipo de felicidad, sorpresa, tristeza, enfado o neutro... Incluye visualmente diferentes objetos informativos tales como i) Respuesta emocional, presentando el porcentaje del tiempo en los que se ha producido una respuesta emocional, bien positiva o negativa, con respecto a una respuesta neutra; ii) Tipo de respuesta emocional, indicando porcentualmente, la duración total en la que se ha registrado una de las emociones no neutra; iii) Respuesta emocional según el día de la semana.

VI) Pestaña ‘TouchEnPantalla’, o toque en pantalla: Muestra una perspectiva sobre interactividad en la pantalla táctil (40b) de los clientes (2) con el dispositivo expositor. Incluye visualmente diferentes objetos informativos tales como i) Fechas; ii) Localización; iii) Producto (1), limitando el conjunto de datos representados según del producto (1) al que se asocia el touch o toque en la pantalla táctil (40b), permitiendo una selección múltiple; iv) Tipo de dispositivo expositor, no permitiendo una selección múltiple; v) Toques diarios según hora, vi) Toques en las diferentes pestañas; vii) Flujo a través de las diferentes pestañas, permitiendo una lectura rápida de cómo se han movido los clientes (2) a través de las diferentes pestañas.

VII) Pestaña ‘Productos’: Muestra una visión general de los principales indicadores para los diferentes dispositivos expositores y productos (1) que conforman la campaña. Incluye visualmente diferentes objetos informativos tales como i) Fechas; ii) Localización; iii) Categoría, limitando el conjunto de datos representados por categorías de productos (1); iv) Producto; v) Resumen de indicadores; vi) Desglose de indicadores por dispositivo expositor y producto (1), según interacciones diarias, duración media de la interacción, y número de toques diarios.

VIII) Pestaña ‘Contenido’: Muestra información concerniente a la reproducción de diferente contenido audiovisual visual en los dispositivos expositores. Incluye visualmente diferentes objetos informativos tales como i) Resumen de indicadores con las métricas más significativas relacionadas con el contenido reproducido, en concreto la audiencia potencial por hora, la tasa de atracción por hora, las interacciones por hora o el tiempo de reproducción por día.

Según otro aspecto de la invención, en concreto del acceso de los usuarios finales o clientes (2) a los informes, se ha de cumplir con el requisito de que los usuarios finales o clientes (2) tengan acceso únicamente a la información relativa a las campañas de las que son propietarios, incluyendo un mecanismo denominado seguridad a nivel de fila, consiste en la creación de roles que tienes asociadas reglas y que restringen el acceso de los usuarios finales o clientes (2) a fragmentos del conjuntos de datos mostrados en paneles, informes, iconos, etc. a los que tienen acceso.

Se consigue dicho objetivo de limitación del acceso a los informes de los usuarios finales o clientes (2) a través de la característica Insertar. Este procedimiento requiere que los usuarios finales o clientes (2) dispongan de una licencia de un servicio de visualización avanzada de datos, como ya se ha mencionado anteriormente, y que el informe haya sido compartido con ellos. Se trata de una vista de lectura, de manera que no podrá ser modificada por los consumidores con los que ha sido compartido. Para limitar el acceso de los clientes (2) a los datos de los que son propietarios se hará uso de la seguridad a nivel de fila, y para mostrar en el informe información relativa a una única campaña, se utilizarán filtros en la URL que se utiliza como origen de contenido del iFrame o elemento HTML.

Al objeto de que cada dispositivo expositor pueda adaptar la estimulación al espacio de venta, al producto (1) y a la audiencia que tenga delante, se ha diseñado una plataforma para gestionar la experiencia. Esta se permite el diseño de campañas, dentro de las cuales hay productos ()1 asociados, y una serie de plantillas sobre las que mostrar los contenidos multimedia (40a).

Los datos de la audiencia, es decir, las interacciones a través del sistema RFID y de los clicks en la pantalla táctil (40b) son enviados a un servidor (8) para ser gestionados. En concreto se puede hacer uso del servidor IIS (Internet Information Services) alojado por una de las capas que ofrece la infraestructura en la nube de AWS (Amazon Web Services) y específicamente en este caso, de la capa Elastic Beanstalk. Por otra parte se cuenta con una base de datos (81) relacional para su uso en aplicaciones, en concreto una base de datos SQL Server 2016. Dicha base de datos (81) es la que almacena todos los registros de información y mediante la cual se intercambia la información de los inputs o entradas y outputs o salidas. Contiene a su vez tablas distribuidas en diferentes áreas que se interrelacionan según la finalidad y la naturaleza de los datos que se alojan en ellas.

Con respecto a las funcionalidades visuales presentadas en el dispositivo expositor, hay que señalar, a modo de criterios generales que la información a mostrar dependerá de la posición y del tipo de producto (1), siguiendo unas pautas de gestión de las etiquetas RFID (73). La información desaparecerá cuando se vuelva a dejar en la antena RFID (72) donde estaba, o bien cuando haya transcurrido un tiempo definido, que puede ser de 5 minutos por ej. La información entretanto a mostrar sería la correspondiente al último producto levantado, es decir, separado de su posición de apoyo, en la cercanía de la antena RFID (72). Cuando se dejan todos los productos (1), en su posición inicial, la pauta puede ser la de volver al estado reposo. Los contenidos multimedia (40a) a mostrar pueden estar en función de la audiencia a través de reglas modulables que permitan segmentar dichos contenidos multimedia (40a).

Las funcionalidades generales con las que pueden suministrarse los dispositivos expositores, una vez estén conectados con la plataforma de gestión pueden ser, de modo no limitativo: i) Conexión con la plataforma para reconocer las plantillas y los contenidos multimedia (40a) a mostrar. La base de datos (81) proporciona la información necesaria para el funcionamiento del dispositivo expositor, incluyendo modos, lista de reproducciones asociadas, productos (1) y los contenidos multimedia (40a) audiovisuales asociados; ii) Gestión de etiqueta RFID (73), incluyendo en los productos (1) definidos el número de etiqueta RFID (73) asociado al producto (1); iii) Gestión de lista de reproducciones asociadas, adaptando el fondo a lo definido en la plataforma, con todos los contenidos multimedia (40a) audiovisuales dinámicos.

En cuanto a lo que sería el estado reposo o inicial, cuando están todos los productos (1) en posición, se muestran los siguientes contenidos multimedia (40a) audiovisuales: El logo de la marca, por ej. arriba a la izquierda de la pantalla, idiomas con icono de banderas para selección de idiomas, título, subtítulo. Durante este estado salen de fondo los videos asociados a la lista de reproducción elegida contenida en la plantilla de contenidos multimedia (40a).

Atendiendo específicamente a las funcionalidades por producto (1), se incluyen una serie de funcionalidades visuales dependientes de la interacción de los consumidores o clientes (2) con los productos (1). Así, en lo relativo a la gestión de la interacción de coger o dejar el producto (1), se recibe por MQTT la siguiente información derivada del sistema antena RFID (72) vs etiqueta RFID (73): Producto (1) con el que se ha interaccionado, si ha sido cogido o dejado y la posición en la que se ha interaccionado, por ej. la 2§ de 4 empezando por la izquierda en la primera balda del dispositivo expositor. Una vez concretado el producto (1) tomado, se muestra la información relativa al mismo, en función de la posición de donde estaba el producto (1) que se ha cogido. La información desaparecerá se vuelva a dejar sobre la antena RFID (72), o transcurra un tiempo definido, por ej. de 5 min. La información a mostrar viene definida por plantillas, las cuales contienen pestañas, y cada una tiene un diseño y una información de contenidos multimedia (40a). En el caso de que se levanten varios productos (1) se mostrarían varias informaciones, correspondientes a cada uno de los productos (1), de modo secuencial, acabando con la información del último producto (1) levantado. Y si se dejan todos los productos (1), en su posición se vuelve al estado reposo.

Opcionalmente las funcionalidades visuales pueden ser inteligentes, es decir, basadas en la audiencia particular en cada momento. Así, y para optimizar los contenidos multimedia (40a) a mostrar en función de la audiencia, se ha realizado una conexión de las métricas (91) de audiencia con los medios de emisión (40). En este sentido, se han desarrollado una serie de reglas modulables que permiten segmentar los contenidos multimedia (40a) en base a la edad estimada y el género de los consumidores o clientes (2) que están delante del dispositivo expositor. De este modo, esta última capa o nivel de procesamiento basada en reglas provee al dispositivo expositor de una inteligencia que permite adaptar los contenidos multimedia (40a) almacenados en la plataforma para una determinada marca o producto (1) en función de la audiencia que tiene en cada momento.

Complementariamente a lo anterior, señalar la posibilidad de integrar modelos de Inteligencia Artificial (IA) en la gestión de las funcionalidades y de la emisión de contenidos multimedia (40a) del dispositivo expositor. Una primera tipología de modelos de Inteligencia Artificial sería la que establecería una prioridad genérica, en función del día y hora para los contenidos multimedia (40a) existentes. Una segunda tipología de modelos de Inteligencia Artificial sería el aplicado a tiempo real, reconociendo las dinámicas de la audiencia a cada momento. A este respecto es relevante el concepto del tasa de interés, o Interest score, calculándose como una combinación lineal de las paradas con mirada, ‘picks’, o interacciones con el producto, y ‘clicks’, o número de toques.

Precisar que para la creación de modelos de inteligencia artificial se utilizan algoritmos de machine learning supervisados. En concreto para un primer modelo de inteligencia artificial sin contar con la audiencia, estableciendo una prioridad genérica en función del día y hora, el objetivo es predecir qué contenidos multimedia (40a) se ejecuta cuando ningún cliente (2) interactúa, dado una franja de tiempo de un día específico. El modelo predictivo, dada información previa del funcionamiento de contenidos multimedia (40a) previos en una franja de tiempo específica, aprende cuáles han sido los que maximizan el interés. Dicho modelo se puede ejecutar varias veces al día para cambiar la probabilidad de cada uno de los contenidos multimedia (40a) disponibles de ser mostrado, emitiendo así más veces los que maximizan el interés.

Se cita un ejemplo de uso: Un martes de febrero a las 16h se ejecuta el modelo para saber qué contenidos multimedia (40a) se muestran mostrar durante la franja de tarde ese día. Al modelo se introducen los parámetros de esa tarde: martes de febrero, de 17h a 21h, día frio, húmedo y lluvioso, en una ciudad determinada. Con esta información, el modelo analiza cuánto interés creará cada contenidos multimedia (40a), y dará mayor probabilidad a los que más interés infiere que crearán, por ej.: contenidos multimedia (40a) con entorno cálido y con actrices mujeres, por ser el público mayoritario mujeres.

Las entradas o Inputs principales pueden considerarse las de i) contenidos multimedia (40a), con el dato de identificador, palabras clave, autores, influencers, etc.; ii) localización, con el dato de ciudad, región, país; iii) Información medioambiental, con los datos de temperatura, humedad y precipitaciones); iv) temporales, con los datos de franja horaria, día de la semana, mes. Como salida o Output se puede emitir el valor de la tasa de interés, o Interest score, calculándose según la fórmula £(#ParadasconMirada+1.5*picks+2*clicks]

Con respecto a una segunda tipología de modelos de Inteligencia Artificial, con una selección contenidos multimedia (40a) específicos para una audiencia, si bien estando aplicados a un tiempo real, reconociendo las dinámicas de la audiencia a cada momento. Su objetivo es el de predecir cuál es el contenidos multimedia (40a) a ejecutar cuando ningún cliente (2) y que maximice el interés con el dispositivo expositor, dada una audiencia en un momento específico.

El modelo predictivo tiene en consideración la información previa del funcionamiento de contenidos multimedia (40a) previos con una audiencia específica, aprendiendo cuáles han sido los que maximizan el interés. Este modelo se ejecuta varias veces al día para cambiar la probabilidad de cada uno de los contenidos multimedia (40a) disponibles de ser mostrado, en función de la audiencia que puede tener delante el dispositivo expositor, para una franja de tiempo determinada. Una vez precalculados los resultados del modelo, la probabilidad de mostrar un contenido multimedia (40a) para una audiencia específica cambiará cada vez que se reconoce a esa audiencia parada delante del dispositivo expositor, cambiando los contenido multimedia (40a) se muestran para adaptarlos a la audiencia.

Se cita un ejemplo de uso: Un martes de febrero a las 16h se ejecuta el modelo para saber qué mostrar cuando cambie la audiencia esa tarde. De esta manera, se calculan las diferentes probabilidades asociadas a combinaciones de audiencia (hombres jóvenes, hombres media edad, hombres mayores, mujeres jóvenes, mujeres media edad, mujeres mayores, genero mixto joven, genero mixto media edad y genero mixto mayores), y también teniendo en cuenta los parámetros de esa tarde (martes de febrero, de 17h a 21h, día frio, húmedo y lluvioso, en una ciudad determinada). De esta manera, no hay que calcular los modelos a cada momento, sino que los resultados están precargados. En un momento dado, el dispositivo expositor detecta que hay 3 hombres de mediana edad parados delante, por lo que cambia la probabilidad de los contenidos multimedia (40a) a los que maximizan la tasa de interés para esa franja de audiencia esa tarde.

Las entradas o Inputs principales pueden considerarse las de i) contenidos multimedia (40a), con el dato de identificador, palabras clave, autores, influencers, etc.; ii) localización, con el dato de ciudad, región, país; iii) Información medioambiental, con los datos de temperatura, humedad y precipitaciones); iv) temporales, con los datos de franja horaria, día de la semana, mes; v) audiencia tipo. Como salida o Output se puede emitir el valor de la tasa de interés, calculándose según la fórmula £(#ParadasconMirada+1.5*picks+2*clicks]

Con respecto a una tercera tipología de modelos de Inteligencia Artificial, con una selección de información aumentada de producto (1) especifico para clicks o pulsaciones de interacción. El objetivo es el de predecir cuál es el tipo de información a mostrar para cada producto (1) al interactuar, que maximizará el interés con dicho producto (1) dado una franja de tiempo de un día específico.

El modelo predictivo, dada información previa del funcionamiento de variantes de contenido para un mismo producto (1) que es mostrada al usuario cliente (2) y que es seleccionable por él, aprende cuáles han sido las que han recibido mayor interés por parte del sujeto cliente (2). Este modelo se ejecuta con las diferentes variantes de contenidos multimedia (40a), y varias veces al día para cambiar la probabilidad de cada uno de los contenidos multimedia (40a) disponibles sea mostrado, en función de la audiencia que puede tener delante el dispositivo expositor y una franja de tiempo. Una vez precalculados los resultados del modelo, la probabilidad de mostrar un tipo de variante de información del producto (1) para una audiencia específica cambiará cada vez que se reconoce a esa audiencia parada delante del dispositivo expositor, cambiando los contenidos multimedia (40a) que se muestran para adaptarlos a la audiencia.

Se cita un ejemplo de uso: Un martes de febrero a las 16h se ejecuta el modelo para saber qué mostrar en el producto (1) expuesto en el dispositivo expositor cuando cambie la audiencia esa tarde. Por cada producto (1) hay 5 posibles pestañas de información a mostrar de las cuales solo se muestran 3 cada vez. El dispositivo expositor ha estado aprendiendo durante tiempo mostrando diferentes combinaciones de 3 pestañas de las 5 posibles en cada espacio (localización) en cada franja horaria y asociando resultados al perfil de audiencia cuantificando cuales han sido las pestañas más elegidas por los clientes (2). De esta manera, se calculan las diferentes probabilidades asociadas a combinaciones de audiencia (hombres jóvenes, hombres media edad, hombres mayores, mujeres jóvenes, mujeres media edad, mujeres mayores, genero mixto joven, genero mixto media edad y genero mixto mayores), y también teniendo en cuenta los parámetros de esa tarde (martes de febrero, de 17h a 21h, día frio, húmedo y lluvioso, en una ciudad concreta). De esta manera, no hay que calcular los modelos a cada momento, sino que los resultados están precargados. En un momento dado, el dispositivo expositor detecta que hay 3 hombres de mediana edad parados frente a dicho dispositivo expositor, por lo que cambia la probabilidad de los contenidos asociados al producto (1) a los que maximizan la tasa de interés para esa franja de audiencia esa tarde.

En un adicional ejemplo de uso: De igual modo al caso anterior, la pestaña de información asociada al producto (1) es una sola y las variantes se producen en una imagen emitida (40c) que se muestra del producto (1). En este caso se disponen de 10 imágenes emitidas (40c) diferentes a mostrar y el modelo aprenderá cual de las imágenes emitidas (40c) es la idónea basándose en el interés que en este caso se podría medir por la respuesta facial emocional positiva/negativa del usuario cliente (2) que interactúa con el producto (1).

Las entradas o Inputs principales pueden considerarse las de i) contenidos multimedia (40a), con el dato de identificador, palabras clave; ii) localización, con el dato de ciudad, región, país; iii) Información medioambiental, con los datos de temperatura, humedad y precipitaciones); iv) temporales, con los datos de franja horaria, día de la semana, mes; v) audiencia tipo. Como salida o Output se puede emitir el valor de la tasa de interés, calculándose según la fórmula £(#ParadasconMirada+1.5*picks+2*clicks]

Más específicamente, según se observa en la figura 2, el dispositivo expositor para comercio que comprende medios de emisión (40) de contenidos multimedia (40a) asociados a un producto (1) ofrecido por el comercio, hacia al menos un cliente (2) de dicho comercio; medios de captación (41) de imágenes captadas (41a) del entorno físico (3) de dicho comercio; medios de procesamiento (42) de dichas imágenes captadas (41a) de dicho entorno físico (3); comprendiendo adicionalmente medios de reconocimiento comportamental (44) de al menos un cliente (2) presente en dicho comercio, configurados para el seguimiento de su comportamiento espacial y/o gestual en el entorno físico (3) del dispositivo expositor, así como para el reconocimiento de sus atributos demográficos y/o de su respuesta emocional.

Por otro lado, según se observa en las figuras 9 y 10, el dispositivo expositor para comercio comprende medios de detección de la interacción (45) del cliente (2) con el dispositivo expositor.

Más en detalle, según se observa en la figura 10, los medios de emisión (40) de contenidos multimedia (40a) son una pantalla táctil (40b).

Según otro aspecto de la invención, según se observa en la figura 6, el dispositivo expositor comprende, opcionalmente, al menos un marco de infrarrojos (5) configurado para la detección del paso de algún elemento físico (51) a su través. Como ejemplo de elemento físico (51), citar la mano de un cliente (2).

En una realización preferente de la invención, según se observa en la figura 3, los medios de emisión (40) de contenidos multimedia (40a) y/o los medios de captación (41) de imágenes captadas (41a) y/o los medios de procesamiento (42) de dichas imágenes captadas (41a), están conectados a unos medios de control (47). Adicionalmente el dispositivo expositor está conectado a internet por medio de un router.

Opcionalmente, según se observa en la figura 7, los medios de emisión (40) de contenidos multimedia (40a) asociados a un producto (1) son al menos un dispositivo de representación de realidad virtual (6).

Según otro aspecto de la invención, como se observa en las figuras 8, 9 y 10, el dispositivo expositor comprende al menos una estructura de soporte (7) configurada para el apoyo de al menos un producto (1) de dicho comercio.

Por otro lado, según se observa en la figura 3, el dispositivo expositor comprende opcionalmente al menos una antena RFID (72) configurada para establecer una conexión (82) inalámbrica con al menos una etiqueta RFID (73) ubicada en el producto (1).

Complementariamente, según se observa en la figura 4, el dispositivo expositor comprende medios de iluminación (48) del producto (1) en su zona de apoyo (71) sobre la estructura de soporte (7).

En una realización particular de la invención, a modo de estantería interactiva, según se observa en las figuras 4 y 5, el dispositivo expositor para comercio comprende una estructura de soporte (7) en posición substancialmente horizontal, y medios de emisión (40) de contenidos multimedia (40a) en posición substancialmente vertical.

En otra realización particular de la invención, a modo de vitrina interactiva, según se observa en la figura 6, el dispositivo expositor para comercio comprende una estructura de soporte (7) en posición substancialmente horizontal, y medios de emisión (40) de contenidos multimedia (40a) en posición substancialmente horizontal.

En otra realización particular de la invención, a modo de tótem interactivo, según se observa en la figura 10, el dispositivo expositor para comercio comprende medios de emisión (40) de contenidos multimedia (40a) asociados a un producto (1), en posición substancialmente vertical y al menos una pantalla táctil (40b) configurada para la interacción con el cliente (2).

Según otro aspecto de la invención, tal y como se observa en la figura 5, el dispositivo expositor para comercio comprende medios de recogida (49) de datos ambientales (49a) en el entorno físico (3) de un dispositivo expositor, en donde los datos ambientales (49a) son relativos a al menos una variable del grupo de temperatura, humedad, ruido ambiente y/o iluminación. Su objetivo es crear una plataforma de recogida de datos ambientales en el entorno físico (3) de la tienda, que contemple las características ser escalable, modular, y distribuida. Debe ser escalable, ya que el prototipo inicial puede constar de un número variable de dispositivos, captadores y receptores de datos. Tiene que ser modular, ya que, la tarea de recogida de datos en una localización podrá realizarse en un solo dispositivo o nodo, o separarse en varios según las condiciones del entorno físico (3). Tiene que ser distribuida, ya que, para cumplir los anteriores objetivos el sistema consistirá en una plataforma conectada a través de la red, sin más requerimiento que la salida a internet. La parte de la plataforma receptora de datos deberá tener la capacidad de registrar y de mandar los datos a un servidor (8) remoto o base de datos (81) para su posterior análisis y obtención de métricas (91). El planteamiento básico es el de obtener lecturas de temperatura, humedad, ruido ambiental, e iluminación.

Es también objeto de la presente invención, según se observa en la figura 2, un método de procesamiento de imágenes captadas (41a) por un dispositivo expositor para comercio, que comprende las etapas de i) captación de imágenes captadas (41 a) del entorno físico (3) de dicho comercio; ii) detección de un cliente (2) de dicho comercio; iii) seguimiento de la posición física y/o de los desplazamientos y/o de los movimientos corporales y/o de la expresión facial de dicho cliente (2) del comercio; iv) obtención de una pluralidad de métricas (91) asociadas a la posición física y/o de los desplazamientos y/o de los movimientos corporales y/o de la expresión facial de dicho cliente (2) del comercio; v) determinación del grado de interés (92) del cliente (2) en al menos un producto (1) presentado en el dispositivo expositor en base a dichas métricas (91).

En concreto, y respecto del seguimiento del cliente (2), se efectúa el rastreo de su posición física, de sus desplazamientos y, por tanto, de si realiza al menos una parada, de la orientación de su cabeza y por tanto de la mirada, de la interacción de dicho usuario cliente (2) con los productos (1) colocados en el dispositivo expositor, y por tanto de si coge o deja un producto (1) y el tiempo que lo tiene en su mano. Asimismo, rastreo de la interacción del usuario cliente (2) con los medios de emisión (40) ubicados en el dispositivo expositor, y de la interacción con un dispositivo de representación de realidad virtual (6), en concreto gafas de realidad virtual de tipo Head mounted display, o pantalla montada en la cabeza, ubicadas en el dispositivo expositor.

Adicionalmente, según se observa en la figura 9, el método de procesamiento de imágenes captadas (41a) comprende el seguimiento de los movimientos corporales y/o de la expresión facial del cliente (2) comprende el seguimiento de al menos una variable del grupo de guiñada, cabeceo, balanceo, proximidad y tiempo mirando a unos medios de captación (41) de imágenes captadas (41a).

Complementariamente, según se observa en la figura 10, dicho método de procesamiento de imágenes captadas (41a) comprende la determinación del grado de interés (92) del cliente (2) en al menos un producto (1) presentado en el dispositivo expositor es en base a una combinación lineal (93) del número de paradas con mirada frente al dispositivo expositor, con el número de interacciones con el producto (1), y con el número de toques en una pantalla táctil (40b) y/o con el número de interacciones en un dispositivo de representación de realidad virtual (6).

Los detalles, las formas, las dimensiones y demás elementos accesorios, así como los componentes empleados en la implementación del dispositivo expositor para comercio y método de procesamiento de imágenes captadas por el mismo, podrán ser convenientemente sustituidos por otros que sean técnicamente equivalentes, y no se aparten de la esencialidad de la invención ni del ámbito definido por las reivindicaciones que se incluyen a continuación de la siguiente lista.

Lista referencias numéricas:

1 producto

2 cliente

3 entorno físico

40 medios de emisión

40a contenidos multimedia

40b pantalla táctil

40c imágenes emitidas

41 medios de captación

41a imágenes captadas

42 medios de procesamiento

43 medios de selección

44 medios de reconocimiento comportamental 45 medios de detección de la interacción

46 medios de proyección

46a superficie

47 medios de control

48 medios de iluminación

49 medios de recogida

49a datos ambientales

5 marco de infrarrojos

51 elemento físico

6 dispositivo de representación de realidad virtual 7 estructura de soporte

71 zona de apoyo

72 antena RFID

73 etiqueta RFID

8 servidor

81 base de datos

82 conexión

83 internet

91 métricas

92 grado de interés

93 combinación lineal

Claims (1)

1. REIVINDICACIONES

   1- Dispositivo expositor para comercio que comprende:

   - medios de emisión (40) de contenidos multimedia (40a) asociados a un producto (1) ofrecido por el comercio, hacia al menos un cliente (2) de dicho comercio;

   - medios de captación (41) de imágenes captadas (41a) del entorno físico (3) de dicho comercio;

   - medios de procesamiento (42) de dichas imágenes captadas (41a) de dicho entorno físico (3);

   caracterizado por que comprende medios de reconocimiento comportamental (44) de al menos un cliente (2) presente en dicho comercio, configurados para el seguimiento de su comportamiento espacial y/o gestual en el entorno físico (3) del dispositivo expositor, así como para el reconocimiento de sus atributos demográficos y/o de su respuesta emocional.

   2- Dispositivo expositor para comercio según la reivindicación 1, caracterizado por que comprende medios de detección de la interacción (45) del cliente (2) con el dispositivo expositor.

   3- Dispositivo expositor para comercio según la reivindicación 1, caracterizado por que los medios de emisión (40) de contenidos multimedia (40a) son una pantalla táctil (40b).

   4- Dispositivo expositor para comercio según cualquiera de las reivindicaciones anteriores, caracterizado por que comprende al menos un marco de infrarrojos (5) configurado para la detección del paso de algún elemento físico (51) a su través.

   5- Dispositivo expositor para comercio según cualquiera de las reivindicaciones anteriores, caracterizado por que los medios de emisión (40) de contenidos multimedia (40a) y/o los medios de captación (41) de imágenes captadas (41a) y/o los medios de procesamiento (42) de dichas imágenes captadas (41a), están conectados a unos medios de control (47).

   6- Dispositivo expositor para comercio según cualquiera de las reivindicaciones anteriores, caracterizado por que los medios de emisión (40) de contenidos multimedia (40a) asociados a un producto (1) son al menos un dispositivo de representación de realidad virtual (6).

   7- Dispositivo expositor para comercio según cualquiera de las reivindicaciones anteriores, caracterizado por que al menos una estructura de soporte (7) está configurada para el apoyo de al menos un producto (1) de dicho comercio.

   8- Dispositivo expositor para comercio según la reivindicación 7, caracterizado por que comprende al menos una antena RFID (72) configurada para establecer una conexión (82) inalámbrica con al menos una etiqueta RFID (73) ubicada en el producto (1).

   9- Dispositivo expositor para comercio según las reivindicaciones 7 u 8, caracterizado por que comprende medios de iluminación (48) del producto (1) en su zona de apoyo (71) sobre la estructura de soporte (7).

   10- Dispositivo expositor para comercio según cualquiera de las reivindicaciones 7 a 9, caracterizado por que comprende una estructura de soporte (7) en posición substancialmente horizontal, y medios de emisión (40) de contenidos multimedia (40a) en posición substancialmente vertical.

   11- Dispositivo expositor para comercio según cualquiera de las reivindicaciones 7 a 9, caracterizado por que comprende una estructura de soporte (7) en posición substancialmente horizontal, y medios de emisión (40) de contenidos multimedia (40a) en posición substancialmente horizontal.

   12- Dispositivo expositor para comercio según cualquiera de las reivindicaciones 1 a 6, caracterizado por que comprende medios de emisión (40) de contenidos multimedia (40a) asociados a un producto (1), en posición substancialmente vertical y al menos una pantalla táctil (40b) configurada para la interacción con el cliente (2).

   13- Dispositivo expositor para comercio según cualquiera de las reivindicaciones 1 a 12, caracterizado por que comprende medios de recogida (49) de datos ambientales (49a) en el entorno físico (3) de un dispositivo expositor, en donde los datos ambientales (49a) son relativos a al menos una variable del grupo de temperatura, humedad, ruido ambiente y/o iluminación.

   14- Método de procesamiento de imágenes captadas (41a) por un dispositivo expositor para comercio, que comprende las etapas de:

   i) captación de imágenes captadas (41a) del entorno físico (3) de dicho comercio;

   ii) detección de un cliente (2) de dicho comercio;

   iii) seguimiento de la posición física y/o de los desplazamientos y/o de los movimientos corporales y/o de la expresión facial de dicho cliente (2) del comercio;

   iv) obtención de una pluralidad de métricas (91) asociadas a la posición física y/o de los desplazamientos y/o de los movimientos corporales y/o de la expresión facial de dicho cliente (2) del comercio;

   v) determinación del grado de interés (92) del cliente (2) en al menos un producto (1) presentado en el dispositivo expositor en base a dichas métricas (91).

   15- Método de procesamiento de imágenes captadas (41a) por un dispositivo expositor para comercio según la reivindicación 14, caracterizado por que el seguimiento de los movimientos corporales y/o de la expresión facial del cliente (2) comprende el seguimiento de al menos una variable del grupo de guiñada, cabeceo, balanceo, proximidad y tiempo mirando a unos medios de captación (41) de imágenes captadas (41a).

   16- Método de procesamiento de imágenes captadas (41a) por un dispositivo expositor para comercio según las reivindicaciones 14 ó 15, caracterizado por que la determinación del grado de interés (92) del cliente (2) en al menos un producto (1) presentado en el dispositivo expositor es en base a una combinación lineal (93) del número de paradas con mirada frente al dispositivo expositor, con el número de interacciones con el producto (1), y con el número de toques en una pantalla táctil (40b) y/o con el número de interacciones en un dispositivo de representación de realidad virtual (6).