FR3123484A1

FR3123484A1 - Procédé et dispositif pour simuler un maquillage à partir d’un avatar

Info

Publication number: FR3123484A1
Application number: FR2105693A
Authority: FR
Inventors: Helga MALAPRADE; Tiffany JAMES
Original assignee: LOreal SA
Current assignee: LOreal SA
Priority date: 2021-05-31
Filing date: 2021-05-31
Publication date: 2022-12-02

Abstract

Procédé et dispositif pour simuler un maquillage à partir d’un avatar L’invention concerne un procédé pour simuler l’effet de l’utilisation d’un produit de maquillage appliqué sur une zone corporelle, notamment des lèvres, le procédé comportant les opérations consistant à : Causer la présentation sur un écran d’au moins une première image (1) 3D comportant une zone corporelle, notamment des lèvres, Permettre à l’utilisateur de redimensionner la zone corporelle, Afficher sur l’écran au moins une deuxième image virtuelle (2) formée par l’utilisateur en réponse au redimensionnement de la première image (1), Permettre à l’utilisateur de choisir un produit de maquillage. Figure: 2

Description

Procédé et dispositif pour simuler un maquillage à partir d’un avatar

La présente invention concerne un procédé et un dispositif permettant de simuler l’aspect d’une zone corporelle maquillées par un produit cosmétique.

Plus généralement, un produit cosmétique est un produit tel que défini dans le Règlement CE N°1223/2009 du Parlement européen et du Conseil daté du 30 novembre 2009, relatif aux produits cosmétiques.

Arrière-plan technologique

Une application de maquillage virtuel en temps réel offre aux utilisateurs une expérience interactive en réalité augmentée avec une haute préservation de l'identité et un réalisme détaillé.

Idéalement, les utilisateurs aiment avoir un aperçu des produits de maquillage (par exemple, le rouge à lèvres ou le fard à paupières) sans les essayer.

En outre, les essais virtuels donnent aux utilisateurs la liberté d'ajuster les attributs pertinents du produit (par exemple, la couleur et la brillance) en fonction de leurs préférences personnelles.

La plupart de ces essais virtuels nécessitent une photographie du visage de l’utilisateur.

Dans ce sens, le document US9224248B2 divulgue un procédé pour appliquer un maquillage virtuel en temps réel pour créer des effets de relooking virtuels, comprenant:

Capturer une image statique ou un ensemble d'images ordonnées séquentiellement par une caméra ;

Démarrer un algorithme de suivi du visage pour obtenir une pluralité de points de suivi du visage en temps réel sur une région du visage d'une personne ; et

Effectuer une étape d'application de maquillage virtuel en simulant la mise en place d'un article de maquillage sélectionné sur le visage selon la pluralité de points de repérage du visage en temps réel ;

Les points de suivi comprennent un contour extérieur d'un visage, un nez et une pluralité de zones de maquillage appliquées de l'utilisateur;

Capturer un outil d'entrée de maquillage virtuel par la caméra en temps réel, dans lequel un algorithme de suivi d'objet est appliqué pour suivre la position de l'outil de maquillage virtuel pour effectuer le maquillage virtuel à l'approche de la région du visage de la personne.

De même, le document US9378574B2 divulgue un appareil produisant un avatar de maquillage, l'appareil comprenant: un matériel informatique couplé en communication à un affichage, le matériel informatique étant configuré pour: générer des métadonnées de capteur de caméra de spectre, basées sur des informations de spectre de peau d'un utilisateur et des informations de spectre de cosmétiques identifiant un attribut d'un maquillage indiqué par un fabricant;

Recevoir, à partir d'un terminal de l'utilisateur, une entrée relative à un avatar de maquillage auquel le maquillage est appliqué, et générer des informations de maquillage de l'avatar de maquillage en fonction de l'entrée;

Déterminer des informations de commande pour un état de maquillage de l'avatar de maquillage, sur la base des informations de maquillage et des métadonnées de capteur de caméra spectrale; et

Générer des métadonnées d'avatar de maquillage pour l'avatar de maquillage qui sont affichables à l'écran, en fonction des informations de contrôle,

Les métadonnées d'avatar de maquillage sont générées en se référant aux informations de spectre de peau de l'utilisateur et à l'attribut du maquillage identifié dans les informations de spectre de cosmétiques de sorte que l'avatar de maquillage soit produit pour représenter une application réaliste du maquillage à l'utilisateur, et

Les métadonnées de capteur de caméra spectrale comprennent une matrice à valeur réelle indiquant le spectre des informations de spectre de peau et les informations de spectre de cosmétiques.

Bien que l'essayage virtuel en direct à partir d’une photo ait répondu au besoin de nombreux cas d'utilisation liés à la recommandation de produits et aux achats de maquillage en ligne, il reste certains cas d'utilisation liés à un système de personnalisation de rouge à lèvres qu'une image virtuelle ou avatar virtuel pourrait remplir, notamment:

• Lorsque l'utilisateur ne se sent pas à l'aise d'offrir l'accès de son appareil photo à une application pour essayer en direct de nouvelles nuances, mais qu'il souhaite tout de même simuler des nuances de maquillage pour les lèvres afin de les distribuer,

• Lorsque l'utilisateur souhaite une représentation des nuances pour les lèvres de manière plus précise qu’un échantillon de couleur pure, afin de visualiser, d’enregistrer et de classer les nuances préférées de l’utilisateur dans sa bibliothèque de couleurs,

• Lorsque l'utilisateur souhaite éviter l’utilisation imposée d’une photographie du profil associée à un compte utilisateur.

Il existe un besoin de fournir un procédé de maquillage virtuel pour une zone corporelle, utilisant notamment un avatar, capable de :

- être mise en œuvre pour toutes les zones corporelles, comme les cheveux, le corps, tel que le buste, les jambes, les mains, les pieds, les ongles, les bras, le visage tel que les lèvres, les joues, les cils, les sourcils, les paupières, le contour de l’œil, les pommettes, les lèvres, les cernes, les cheveux,

- proposer un avatar ayant une zone corporelle, de la forme souhaitée par l’utilisateur, sans pour autant que l’utilisateur ait à prendre une photo ou une vidéo de la zone corporelle,

- proposer un avatar ayant des lèvres de la forme souhaitée par l’utilisateur, sans pour autant que l’utilisateur ait à prendre une photo ou une vidéo de ses lèvres, si cette opération est trop gênante pour lui,

- proposer un avatar en accord avec les souhaits de l’utilisateur aussi bien avant qu’après le maquillage : la forme des lèvres de l’avatar avant maquillage doit pouvoir être en accord avec la forme voulue par l’utilisateur et le produit de maquillage appliqué aux lèvres de l’avatar doit répondre aux préférences de l’utilisateur,

- la forme des lèvres de l’avatar doit pouvoir être modifiée pour ressembler à la forme des lèvres de l’utilisateur ou bien à celle d’une connaissance de l’utilisateur, pour une meilleure visualisation d’un cadeau par exemple,

- fournir un rendu par défaut qui est visuellement et proportionnellement fidèle aux vraies lèvres afin de répondre au besoin de rendre une représentation précise des nuances de lèvres,

- proposer une fonctionnalité facilement ajustable avec un avatar apte à s’ajuster en temps réel aux modifications en direct de l’utilisateur,

- offrir un mode «automatique» qui repose sur la prise d'une mesure de la teinte de la peau de l'utilisateur et de son application au rendu. Le mode automatique doit refléter fidèlement le teint de l’utilisateur.

Définition de l’invention

L’invention a pour objet, selon un de ses aspects, un procédé pour simuler l’effet de l’utilisation d’un produit cosmétique appliqué sur au moins une zone corporelle, le procédé comportant les opérations (i), (ii), (iii), (iv) et (v), consistant à :

(i) Causer la présentation sur un écran d’au moins une première image virtuelle comportant la zone corporelle,

(ii) Permettre à l’utilisateur de redimensionner la zone corporelle, en agissant sur un paramètre de redimensionnement de la zone corporelle,

(iii) Afficher sur l’écran au moins une deuxième image virtuelle formée par l’utilisateur en réponse au redimensionnement de la zone corporelle de la première image,

(iv) Permettre à l’utilisateur de choisir un produit cosmétique,

(v) Causer la présentation sur l’écran d’une troisième image virtuelle comportant la zone corporelle redimensionnée et maquillée avec le produit choisi,

dans l’opération (i), la première image comportant la zone corporelle est une image 3D.

Avantageusement, la zone corporelle est une zone du visage ou des cheveux.

Plus avantageusement, la zone du visage est choisie parmi les lèvres, les joues, les cils, les sourcils, les paupières, le contour de l’œil, les pommettes.

L’invention a aussi pour objet, selon l’un de ses aspects, un procédé pour simuler l’effet de l’utilisation d’un produit de maquillage appliqué sur des lèvres définies par une lèvre supérieure, une lèvre inférieure et un arc de Cupidon, le procédé comportant les opérations (i), (ii), (iii), (iv) et (v), consistant à :

(i) Causer la présentation sur un écran d’au moins une première image virtuelle comportant des lèvres,

(ii) Permettre à l’utilisateur de redimensionner les lèvres de la première image, en agissant sur un paramètre de redimensionnement des lèvres,

(iii) Afficher sur l’écran au moins une deuxième image virtuelle formée par l’utilisateur en réponse au redimensionnement des lèvres de la première image,

(iv) Permettre à l’utilisateur de choisir un produit de maquillage des lèvres,

(v) Causer la présentation sur l’écran d’une troisième image virtuelle comportant des lèvres redimensionnées et maquillées avec le produit choisi,

Et dans l’opération (i), la première image virtuelle comportant des lèvres est une image 3D.

Selon l’invention, on peut utiliser une photographie comme point de départ pour la transformer en une version 3D des lèvres ou de toute autre zone corporelle formant l’image 3D, que l'utilisateur peut ensuite modifier comme spécifié dans le reste du procédé. Alternativement, l'utilisateur peut partir d'un rendu générique qui ne nécessite pas de photographie.

Par exemple, on peut commencer par une photographie d'une personne et par un logiciel, la transformer en un avatar 3D, dont les fonctionnalités peuvent être modifiées après.

La première image virtuelle comportant des lèvres ou toute autre zone corporelle peut être entièrement réalisée par voie de synthèse ou partiellement réalisée par voie de synthèse, en mettant en jeu une image réelle. Le procédé selon l’invention peut permettre, par exemple, de proposer un produit répondant aux attentes d’une personne après avoir simulé l’effet d’un tel produit sur les lèvres. L’invention peut notamment permettre à cette personne de visualiser différents résultats de maquillage des lèvres ou de toute autre zone corporelle, par exemple des maquillages extrêmes, avant de faire son choix.

L’invention peut encore contribuer à rendre les sites Internet délivrant des conseils de beauté plus attractifs, notamment en offrant de nouvelles possibilités de maquillage virtuel interactif des lèvres ou de toute autre zone corporelle.

Enfin, dans l’objectif de se rapprocher des caractéristiques des lèvres voulues par l’utilisateur, il peut modifier lui-même l’image virtuelle pour redimensionner les lèvres jusqu’à obtenir satisfaction. Ainsi, il devient possible, par des opérations virtuelles et interactives uniquement, de se rapprocher d’une prise de vue réelle, et même mieux, de pouvoir essayer un maquillage des lèvres pour une personne qui ne serait pas présente avec l’utilisateur, comme une connaissance.

Le procédé selon l’invention améliore l'expérience utilisateur en donnant à l'utilisateur plus d'options pour l'essayage cosmétique virtuel et ajoute une amélioration à l'interface.

Cette méthode de personnalisation de l'avatar de la lèvre virtuelle consiste à ajuster la taille et de préférence aussi la forme, ainsi que, de préférence aussi, la teinte.

Eventuellement, l'utilisateur choisit entre divers préréglages d'expression (par exemple, sourire, faire la moue, rire).

Eventuellement, le procédé selon l’invention met en œuvre un :

Dispositif de réglage de la lèvre supérieure pour modifier le volume de la lèvre supérieure,

Ajusteur de la lèvre inférieure pour modifier le volume de la lèvre inférieure,

Ajusteur de l'arc de Cupidon pour modifier la profondeur et la proéminence de l'arc de Cupidon,

Sélecteur de la teinte de la peau (entourant les lèvres), à moins d’opter pour une détection automatique de sa propre teinte de peau,

Ajusteur de sous-tons pour ajuster entre les sous-tons froids et chauds,

Palette de dégradé de teintes à lèvres pour choisir une teinte à lèvres.

L’invention a également pour objet un dispositif permettant de simuler l’effet de l’utilisation d’un produit de maquillage appliqué sur des lèvres définies par une lèvre supérieure, une lèvre inférieure et un arc de Cupidon, comportant :

Une mémoire numérique de stockage conçue pour stocker un choix de produit de maquillage pour les lèvres,

Une unité de calcul et de traitement couplée à la mémoire numérique,

Des moyens d’affichage pour afficher à un utilisateur une première image virtuelle comportant les lèvres,

Un périphérique d’entrée utilisateur apte à recevoir une entrée utilisateur pour redimensionner la première image comportant les lèvres, afin de réaliser une deuxième image virtuelle,

La première image comportant les lèvres est une image3D.

Définitions principales

Par «image virtuelle», on désigne une image ayant subi, lors de sa réalisation, au moins un traitement de synthèse numérique.

Par «image 3D», on désigne une image générée à partir des coordonnées dans l’espace, réel ou virtuel, d’au moins une partie d’une zone corporelle, notamment une partie des lèvres, et mieux de l’intégralité des lèvres. Une image 3D peut permettre, le cas échéant, si le logiciel de visualisation le permet, à l’observateur de faire varier à son gré l’orientation de l’objet relativement à la direction d’observation mais ceci n’est pas indispensable dans la mise en œuvre du procédé selon l’invention.

Une image 3D peut être affichée sur un écran de téléphone portable ou d’ordinateur portable ou de tablette. Une image 3D peut être affichée sur un écran conventionnel, à tube cathodique, cristaux liquides ou plasma, avec ou sans vision stéréographique. La vision stéréographique peut être obtenue, le cas échéant, en utilisant des lunettes adaptées, par exemple à verres rouge et vert ou à obturateurs à cristaux liquides synchronisés avec l’affichage. L’image 3D peut être imprimée ou transmise à distance, sous la forme d’un fichier. L’image 3D peut encore être enregistrée sur tout support adapté, par exemple optique ou électronique. L’image 3D peut comporter une information topographique et une information sur la texture.

L’image 3D des lèvres peut être incorporée à l’image d’un visage, laquelle est avantageusement une image 3D. L’image du visage peut notamment être au moins partiellement une image réelle, par exemple celle d’une personne à qui un conseil de beauté est délivré.

Par« conseil de beauté », on désigne un conseil qui peut se rapporter par exemple à un maquillage à effectuer ou à un produit de soin à appliquer, entre autres.

Un facteur aléatoire au moins est avantageusement appliqué à au moins une caractéristique des lèvres ou de toute autre zone corporelle ou du produit appliqué sur les lèvres, ce qui peut permettre d’accroître le réalisme de la simulation.

Ce facteur aléatoire peut être appliqué par exemple à au moins une caractéristique géométrique des lèvres ou de toute autre zone corporelle.

En variante, ou additionnellement, ce facteur aléatoire peut être appliqué à au moins une caractéristique de la peau entourant les lèvres ou de toute autre zone corporelle.

Par «dispositif électronique grand public capable d'acquérir au moins une image par des moyens numériques et capable de produire des données en relation avec ladite au moins une image acquise», on entend tout appareil accessible à la population générale, qui comprend des moyens permettant de capturer des images numériques une à une, en séquence ou en flux continu.

En d'autres termes, il s'agit de tout appareil qui n'a pas été spécifiquement conçu pour l'analyse de la peau à destination des professionnels.

Par «le procédé comportant les opérations (i), (ii), (iii), (iv) et (v)», on entend que les opérations (i), (ii), (iii), (iv) et (v) peuvent être réalisées dans l’ordre indiqué, dans un ordre différent, certaines étapes peuvent avoir lieu simultanément ou non.

Bien entendu, il est prévu que les solutions de l'invention puissent également être utilisées par des professionnels.

Il s'agit par exemple d'appareils électroniques comportant une fonction photo numérique ou caméra vidéo.

Les dispositifs électroniques grand public utilisables dans le cadre de l'invention sont par exemple de simples téléphones portables, smartphones, tablettes numériques, lecteurs multimédias personnels, micro-ordinateurs ou téléviseurs équipés d'une fonction photo numérique ou caméra vidéo.

Modes de réalisation préférés

De préférence, le procédé selon l’invention présente une ou plusieurs des caractéristiques suivantes, prises seules ou en combinaison :

Selon un premier mode de mise en œuvre du procédé selon l’invention, l’image 3D est générée au moins partiellement à partir d’une image réelle.

Selon un deuxième mode de mise en œuvre du procédé selon l’invention, l’image 3D est générée par synthèse numérique, sans avoir recours à une photographie des lèvres de l’utilisateur.

Dans l’opération (ii), on permet à l’utilisateur de redimensionner les lèvres en effectuant au moins trois opérations successives et indépendantes les unes des autres consistant à changer le volume de la lèvre supérieure, changer le volume de la lèvre inférieure et changer la profondeur de l’arc de Cupidon. Le choix particulier de ces trois modifications dimensionnelles est pertinent pour une bonne représentation des lèvres. En effet, en choisissant ces trois paramètres spécifiques, il est possible de reconstituer des lèvres à souhait, de façon réaliste et pratique.

On affiche au moins un premier moyen de réglage d’un paramètre de redimensionnement des lèvres sur un même écran que la première image virtuelle comportant des lèvres et on modifie de manière quasi-simultanée l'aspect de la première image virtuelle en réponse à tout changement du paramètre de redimensionnement. Avec cette présentation, l’utilisateur visualise directement ses modifications.

Les premiers moyens de réglage comportent un curseur. Ce moyen de réglage connu des utilisateurs, facilite ses modifications de l’image.

On permet à l’utilisateur de modifier la teinte de la peau entourant les lèvres sur la première image virtuelle ou sur la deuxième image virtuelle à partir de l’écran.

On affiche au moins un deuxième moyen de réglage de la teinte de la peau sur un même écran que la première image virtuelle ou sur le même écran que la deuxième image virtuelle et on modifie de manière quasi-simultanée l'aspect de la première image virtuelle ou de la deuxième image virtuelle en réponse à tout changement de teinte de la peau.

Le deuxième moyen de réglage comporte l’un au moins d’un curseur et d’une palette de couleurs.

Il comprend les opérations consistant à : acquérir une image numérique de la surface de la peau de l’utilisateur au moyen d’un dispositif grand public, traiter l’image numérique acquise, proposer à l’utilisateur une teinte de la peau entourant les lèvres en fonction de l’analyse de l’image numérique acquise lors de l’étape.

On permet à l’utilisateur de choisir l’expression des lèvres de l’une au moins de la première image virtuelle, de la deuxième image virtuelle ou de troisième image virtuelle.

De préférence, le dispositif selon l’invention présente une ou plusieurs des caractéristiques suivantes, prises seules ou en combinaison :

Les moyens d’affichage sont conçus pour afficher à l’utilisateur le choix de produit de maquillage pour les lèvres, et

Le périphérique d’entrée utilisateur est apte à recevoir le choix de produit de maquillage de l’utilisateur, et

L’unité de calcul et de traitement est apte à générer une troisième image virtuelle à partir de la première image virtuelle ou de la deuxième image virtuelle maquillée par le produit de maquillage choisi par l’utilisateur.

L’unité de calcul et de traitement est agencée pour simuler la deuxième image virtuelle à partir du volume de la lèvre supérieure et du volume de la lèvre inférieure et de la profondeur de l’arc de Cupidon des lèvres de la première image virtuelle.

Il comporte un dispositif grand public capable d’acquérir au moins une image par des moyens numériques et capable de proposer une teinte de la peau entourant les lèvres, en relation avec l’image acquise.

Description des figures

D’autres caractéristiques et avantages de l’invention ressortiront à la lecture de la description détaillée qui va suivre, d’exemples de mise en œuvre non limitatifs de celle-ci, schématique et partiel, et à l’examen du dessin annexé, sur lequel :

Description des figures

la représente de manière schématique un exemple de dispositif de simulation conforme à l’invention,

la est un exemple d’une application mobile mettant en œuvre le procédé selon l’invention,

la illustre l’écran de l’application pour le choix de l’expression des lèvres,

la illustre l’image d’une expression neutre proposée lors de l’opération illustrée à la ,

la illustre l’image d’une première expression « expression 1 » proposée lors de l’opération illustrée à la ,

la illustre l’image d’une deuxième expression « expression 2 » proposée lors de l’opération illustrée à la ,

la illustre l’image d’une troisième expression « expression 3 » proposée lors de l’opération illustrée à la ,

la illustre l’écran du mobile lors du choix du volume des lèvres,

la montre une image de la lèvre supérieure à modifier à partir de l’écran de la ,

la illustre l’évolution du volume de la lèvre supérieure selon la position de curseur d’ajustement,

la montre une image de la lèvre inférieure à modifier à partir de l’écran de la ,

la illustre l’évolution du volume de la lèvre inférieure selon la position de curseur d’ajustement,

la montre l’écran du mobile lors du choix de la profondeur de l’arc de Cupidon,

la illustre l’évolution de la profondeur de l’arc de Cupidon selon la position de curseur d’ajustement,

la montre l’écran du mobile lors du choix de la teinte de peau entourant les lèvres,

la illustre les avatars avec différentes teintes de peau entourant les lèvres,

la montre l’écran du mobile lorsque l’utilisateur a choisi de déclencher le mode selfie de son mobile,

la illustre les zones analysées pour la détection de la teinte de la peau entourant les lèvres de l’utilisateur,

la illustre la teinte de peau de l’utilisateur détectée par le mobile,

la illustre la modification de la teinte de peau entourant les lèvres de l’avatar en fonction de la teinte de peau de l’utilisateur détectée par le mobile,

la illustre un deuxième mode de réalisation de l’invention, les avatars proposés par l’application étant préalablement maquillés.

On a représenté à la un dispositif de simulation selon l’invention formé par un dispositif mobile de communication sans fil 100. Le dispositif mobile 100, comprend un processeur (ou microprocesseur) 110 pour exécuter une ou plusieurs applications, une mémoire sous forme de mémoire flash 120 et / ou une mémoire vive (RAM) 130 pour le stockage la ou les applications et les données associées, et une interface utilisateur 140 avec laquelle l'utilisateur interagit avec la ou les applications.

L'interface utilisateur 140 comprend un écran d'affichage 150 (par exemple un écran LCD ou un écran d'affichage tactile).

Le dispositif 100 peut comprendre un clavier ou un clavier 155 et une molette 160.

En option, lorsque l'appareil est un appareil de communication sans fil à commande vocale, comme, par exemple, un smartphone ou téléphone portable, le dispositif comprendrait en outre un microphone 180 et un haut-parleur 182.

Ce dispositif 100 peut éventuellement comprendre un chipset de récepteur GPS 190 ou un autre sous-système de détermination de localisation.

Le processeur 110 et la mémoire 120, 130 de ce dispositif mobile 100 peuvent être configurés pour modifier ou manipuler dynamiquement une représentation graphique formant une première image virtuelle entièrement réalisée par synthèse numérique, telle qu’un émoticône ou un avatar, en fonction des paramètres de simulation.

La modification dynamique de l'émoticône ou de l'avatar peut se faire manuellement (en réponse à la saisie de l'utilisateur sur l'appareil), ou automatiquement (en réponse à des informations clés analysées) ou comme une combinaison des deux.

Une sauvegarde des paramètres de la simulation peut être effectuée par processeur 110 et la mémoire 120, 130.

Pour générer l’avatar, on peut utiliser une «boîte à outils de création d’avatar »qui représenterait le SDK (« Software Development Kit ») à intégrer dans une application pour générer l'avatar.

Le processeur 110 peut être agencé pour effacer automatiquement images virtuelles successives.

Dans l’exemple considéré, le processeur 110 est en outre agencé pour permettre à l’utilisateur d’ajuster sur une première image virtuelle le volume de la lèvre supérieure, le volume de la lèvre inférieure et l’arc de Cupidon.

Le processeur 110 est par ailleurs programmé de manière à pouvoir générer au moins une image virtuelle, en fonction de paramètres de simulation concernant notamment la teinte de la peau entourant les lèvres et des caractéristiques du produit éventuellement appliqué sur les lèvres. Ces caractéristiques peuvent être la couleur, la texture, la brillance, l’aspect nacré.

L’image de synthèse des lèvres redimensionnées est générée par calcul des positions dans l’espace de chaque point des lèvres, en fonction de paramètres de simulation pouvant être ajustés par l’utilisateur, par exemple à l’aide de menus déroulants affichés à côté du résultat de la simulation.

De préférence, les paramètres de simulation incluent :

Le volume de la lèvre supérieure,

Le volume de la lèvre inférieure,

La profondeur de l’arc de Cupidon.

Dans un exemple illustré par la , un utilisateur souhaitant acheter un produit pour maquiller ses lèvres suit les écrans d'une application mobile visant à réaliser les étapes du procédé selon l'invention et exécutés sur son smartphone. Cette application conseille éventuellement l’utilisateur sur le choix d’un produit et propose la vente de produit pour les lèvres.

Sur l'écran d'accueil de l'application mobile, l'utilisateur peut éventuellement, saisir son nom, qui peut être enregistré pour être associé à sa personnalisation d’un avatar et/ou à ses choix de produits.

Après l'écran d'accueil, un écran d'instructions peut apparaître, expliquant comment modifier un avatar formant la première image virtuelle 1.

L'application peut simules numériquement la couleur, la finition et la couverture des nuances des lèvres. Les attributs d'avatar peuvent être personnalisés dans la fonction d'édition.

Sur l’écran, on peut voir un avatar et différents pavés de réglage : un pavé de réglage dimensionnel 11 applicables à la taille et la forme des lèvres de l’avatar de la première image virtuelle 1 et un pavé de réglage de couleurs 12 applicable à la teinte des lèvres de la peau entourant les lèvres.

D’une part, le pavé de réglage dimensionnel 11 « dimension et forme » comporte un pavé « expression » 13 proposant, dans l’exemple représenté, cinq options d’expression de lèvres à choisir par l’utilisateur parmi « neutre », « variant 1 », « variant 2 », « variant 3 » et « variant 4 ».

D’autre part, le pavé de réglage dimensionnel 11 comporte trois curseurs 14, 15, 16 associés respectivement au redimensionnement du volume de la lèvre supérieure, du volume de la lèvre inférieure et de l’arc de Cupidon.

Le pavé de réglage de couleurs 12 comporte dans l’exemple représenté une palette 17 avec 8 pavés de teintes allant de clair à foncé, à choisir par l’utilisateur. En complément, un curseur 18 d’ajustement de la teinte est proposé à l’utilisateur, afin de modifier de manière plus fine, la teinte de peau choisie avec la palette 17. Le curseur 18 a pour effet de modifier la nuance de la peau allant de froide à chaude.

Sur la , l’utilisateur a sélectionné le pavé « expression » 13. L’application lui propose de choisir l’une des les quatre expressions de lèvres représentées sur les figures 4 à 7. L’utilisateur peut sélectionner une « expression des lèvres » pour caractériser la forme générale des lèvres et / ou l’émotion.

Sur la , l’utilisateur a choisi de modifier le volume de la lèvre supérieure 21 et le volume de la lèvre inférieure 22 en déplaçant les curseurs associés 14 et 15. Un déplacement du curseur 14 peut faire varier la lèvre supérieure entre une lèvre fine et une lèvre épaisse.

La matérialise par un cercle la lèvre supérieure 21 et la montre à gauche, une lèvre supérieure fine et à droite, une lèvre supérieure épaisse (ou pulpeuse) selon la position du curseur 30.

La matérialise par un cercle la lèvre inférieure 22 par un cercle et la montre à gauche, une lèvre inférieure fine et à droite, une lèvre inférieure épaisse (ou pulpeuse) selon la position du curseur 31 illustré sur la .

Sur la , l’utilisateur a choisi de modifier l’arc de Cupidon 23 en déplaçant les curseur associé 16. Le réglage du curseur 16, illustré , peut rendre l'arc de Cupidon 23 moins profond (gauche) à plus profond (droite). L’image virtuelle 3 obtenue à l’issue de cette opération est redimensionnée et peut être maquillée si l’avatar proposé à l’origine était déjà maquillé. En particulier, cette image peut être à la fois redimensionnée et maquillée si le choix du produit de maquillage des lèvres était réalisé dès le départ par l’utilisateur. Il peut en être autrement, si le maquillage est proposé dans une étape ultérieure, voire à l’étape finale.

Sur la , l’utilisateur a choisi de modifier la teinte de la peau entourant les lèvres sur la deuxième image virtuelle 2, en choisissant une teinte 81, 82, 83, 84, 85, 86, 87, 88 de la palette 17. Les avatars avec un pourtour des lèvres doté des différentes teintes choisies 82, 83, 86, 89 sont représentés sur la .

Sur la , l’utilisateur a choisi d’ajuster la teinte de la peau entourant les lèvres au moyen du curseur 18.

Sur la , l’utilisateur a choisi de faire détecter la couleur de la peau entourant ses propres lèvres à l’aide du mode selfie de son mobile. La photographie prise par le mobile est analysée. Le logiciel analyse différentes zones 70, 71 et 72 représentées, pour proposer à l’utilisateur une couleur de la peau représentative illustrée à la .

Cette teinte de peau, calculée à partir d’une image réelle, est appliquée à l’avatar de la . De préférence, la photographie est automatiquement capturée par le dispositif mobile de capture d'image une fois qu’une position prédéterminée du mobile est atteinte. Une analyse d'image est avantageusement réalisée sur l'image capturée, notamment une analyse de contraste ou un algorithme de détection d'objet, notamment en utilisant des algorithmes de vision par ordinateur et / ou de reconnaissance faciale.

La plupart des versions récentes de téléphones mobiles ont une fonction d'appareil photo numérique intégrée. En outre, le segment des smartphones capables d'exécuter des applications spécifiques, dessiné par la série symbolique des iPhones d'Apple (marques déposées), par des appareils compatibles avec le système Android de Google (marques déposées) ou encore par les Blackberrys de Research in Motion (déposés marques), est en forte croissance. D'autres types d'appareils électroniques équipés d'une fonction d'acquisition d'images, accessibles au grand public et utilisés seuls ou avec des accessoires ou encore combinés, sont susceptibles d'appliquer l'invention. Par exemple, il s'agit de tablettes numériques telles que l'iPad d'Apple (marques déposées), de lecteurs multimédias personnels tels que certains iPod d'Apple (marques déposées), d'ordinateurs portables avec appareil photo incorporé ou ajouté, d'ordinateurs fixes avec webcam ajoutée, d'appareils photo numériques et de caméras vidéo, téléviseurs connectés avec caméra intégrée ou ajoutée.

Une fois l’avatar modifié selon les souhaits de l’utilisateur, on peut afficher une image de synthèse finale et permettre à l’utilisateur de choisir un produit et/ou un traitement à effectuer sur les lèvres, notamment permettre de choisir une teinte de rouge à lèvres.

On peut afficher une nouvelle image de synthèse des lèvres en fonction du produit ou du traitement choisi, de façon à permettre au consommateur de percevoir l’effet du produit ou du traitement sur les lèvres.

La illustre un autre mode de réalisation de l’invention.

Dans ce mode de réalisation, plusieurs avatars sont présentés à l’utilisateur. Les avatars sont déjà maquillés avec des rouges à lèvres de différentes teintes 91, 92, 93, 94, 95, 96, 97, 98, 99. L’utilisateur choisi un avatar en fonction de la teinte qu’il préfère puis il peut modifier les dimensions des lèvres et la teinte de la peau entourant les lèvres de la même manière que décrit pour les figures précédentes.

Le cas échéant, dans un mode de réalisation non représenté, le consommateur peut indiquer si le résultat affiché correspond à son attente et dans l’affirmative, on peut proposer l’achat du produit ou simplement délivrer un conseil concernant le ou les produits à appliquer ou le ou les traitements à effectuer pour obtenir le résultat souhaité.

Lorsque le résultat affiché ne correspond pas aux attentes du consommateur, on peut offrir à l’utilisateur la possibilité de choisir un nouveau produit ou traitement.

Un résultat de maquillage des lèvres peut encore être simulé avant que le consommateur ne se voit proposer un produit ou un traitement, afin par exemple de permettre au consommateur de faire son choix entre plusieurs styles de maquillage.

Le procédé selon l'invention peut comprendre en outre une étape au cours de laquelle:
une entité commerciale propose de vendre des produits.

Eventuellement, le procédé selon l'invention comprend en outre une étape au cours de laquelle: les préférences de l'utilisateur sont mémorisées au travers des choix qu'il a faits dans les propositions qui lui sont faites. Lesdites préférences associées à l'utilisateur dans une base de données sont éventuellement utilisées à des fins promotionnelles et / ou pour pousser des informations d'intérêt et / ou pour envoyer des échantillons de produits qui peuvent être attractifs après un test et / ou pour proposer d'autres produits qui peuvent être attractifs selon audit au moins un produit sélectionné à l'étape précédente.

Eventuellement, le procédé selon l'invention comprend en outre une étape au cours de laquelle:

Une transaction liée au transfert de propriété dudit au moins un produit finalement sélectionné est validée.

Le procédé selon l'invention peut comprendre en outre une étape au cours de laquelle:

Au moins une question est posée à l'utilisateur.

Cette étape vise à donner les informations requises au système si nécessaire, par exemple qu'il n'est pas possible ou non souhaitable d'obtenir ces informations automatiquement par traitement d'image.

Selon des alternatives applicatives, l'invention prévoit que tous les moyens connus pour interagir avec l'utilisateur peuvent être utilisés à cet effet, par exemple en échangeant des SMS, des emails, des questions et réponses sur un site internet, via une application dédiée exécutée sur un smartphone, sur une tablette numérique, sur un téléviseur connecté à Internet, dans un Set Top Box (boîtier adaptateur) connecté à un téléviseur.

L’invention n’est pas limitée aux exemples qui viennent d’être décrits, et l’on peut notamment ajouter d’autres paramètres de simulation. Selon le maquillage sélectionné, une valeur d’épaisseur de produit peut être automatiquement attribuée.

Claims

Procédé pour simuler l’effet de l’utilisation d’un produit cosmétique appliqué sur au moins une zone corporelle, le procédé comportant les opérations (i), (ii), (iii), (iv) et (v), consistant à :
Causer la présentation sur un écran d’au moins une première image virtuelle (1) comportant la zone corporelle,

Permettre à l’utilisateur de redimensionner la zone corporelle, en agissant sur un paramètre de redimensionnement de la zone corporelle,

Afficher sur l’écran au moins une deuxième image virtuelle (2) formée par l’utilisateur en réponse au redimensionnement de la zone corporelle de la première image (1),

Permettre à l’utilisateur de choisir un produit cosmétique (91, 92, 93, 94, 95, 96, 97, 98, 99),

Causer la présentation sur l’écran d’une troisième image virtuelle (3) comportant la zone corporelle redimensionnée et maquillée avec le produit choisi,
caractérisé par le fait que, dans l’opération (i), la première image (1) comportant la zone corporelle est une image 3D.
Procédé selon la revendication 1, caractérisé par le fait que la zone corporelle est une zone du visage ou des cheveux.
Procédé selon la revendication 2, caractérisé par le fait que la zone du visage est choisie parmi les lèvres, les joues, les cils, les sourcils, les paupières, le contour de l’œil, les pommettes.
Procédé pour simuler l’effet de l’utilisation d’un produit de maquillage appliqué sur des lèvres définies par une lèvre supérieure, une lèvre inférieure et un arc de Cupidon, le procédé comportant les opérations (i), (ii), (iii), (iv) et (v), consistant à :
Causer la présentation sur un écran d’au moins une première image virtuelle (1) comportant des lèvres,

Permettre à l’utilisateur de redimensionner les lèvres de la première image virtuelle (1), en agissant sur un paramètre de redimensionnement des lèvres,

Afficher sur l’écran au moins une deuxième image virtuelle (2) formée par l’utilisateur en réponse au redimensionnement des lèvres de la première image (1),

Permettre à l’utilisateur de choisir un produit de maquillage (91, 92, 93, 94, 95, 96, 97, 98, 99) des lèvres,

Causer la présentation sur l’écran d’une troisième image virtuelle (3) comportant des lèvres redimensionnées et maquillées avec le produit choisi,
caractérisé par le fait que, dans l’opération (i), la première image (1) comportant des lèvres est une image 3D.
Procédé selon la revendication 4, caractérisé par le fait que l’image 3D est générée au moins partiellement à partir d’une image réelle.
Procédé selon la revendication 4, caractérisé par le fait que l’image 3D est générée par synthèse numérique, sans avoir recours à une photographie des lèvres de l’utilisateur.
Procédé selon l’une quelconque des revendications 4 à 6, caractérisé par le fait que dans l’opération (ii), on permet à l’utilisateur de redimensionner les lèvres en effectuant au moins trois opérations (a), (b) et (c) successives et indépendantes les unes des autres consistant à (a) changer le volume de la lèvre supérieure (21), (b) changer le volume de la lèvre inférieure (22) et (c) changer la profondeur de l’arc de Cupidon (23).
Procédé selon la revendication précédente, caractérisé par le fait que les premiers moyens de réglage (14, 15, 16) comportent un curseur.
Procédé selon l’une quelconque des revendications 4 à 8, caractérisé par le fait que l’on permet à l’utilisateur de modifier la teinte de la peau entourant les lèvres sur la première image virtuelle (1) ou sur la deuxième image virtuelle (2) à partir de l’écran (150).
Procédé selon l’une quelconque des revendications 4 à 9, caractérisé par le fait que le deuxième moyen de réglage (12) comporte l’un au moins d’un curseur (18) et d’une palette de couleurs (17).
Procédé selon l’une quelconque des revendications 4 à 10, caractérisé par le fait qu’il comprend les opérations consistant à :
Acquérir une image numérique de la surface de la peau de l’utilisateur au moyen d’un dispositif grand public,

Traiter l’image numérique acquise,

Proposer à l’utilisateur une teinte de la peau entourant les lèvres en fonction de l’analyse de l’image numérique acquise lors de l’étape (vi).
Procédé selon l’une quelconque des revendications 4 à 11, caractérisé par le fait que l’on permet à l’utilisateur de choisir l’expression des lèvres de l’une au moins de la première image virtuelle (1), de la deuxième image virtuelle (2) ou de troisième image virtuelle (3).
Dispositif (100) permettant de simuler l’effet de l’utilisation d’un produit cosmétique sur une zone corporelle, comportant :
une mémoire numérique de stockage (120, 130) conçue pour stocker un choix de produits cosmétiques (91, 92, 93, 94, 95, 96, 97, 98, 99),
une unité de calcul et de traitement (110) couplée à la mémoire numérique (120, 130),
des moyens d’affichage (150) pour afficher à un utilisateur une première image virtuelle (1) comportant la zone corporelle,
un périphérique d’entrée utilisateur (155) apte à recevoir une entrée utilisateur pour redimensionner la première image (1) comportant la zone corporelle, afin de réaliser une deuxième image virtuelle (2),
caractérisé par le fait que la première image (1) comportant la zone corporelle est une image 3D.
Dispositif (100) permettant de simuler l’effet de l’utilisation d’un produit de maquillage appliqué sur des lèvres définies par une lèvre supérieure (21), une lèvre inférieure (22) et un arc de Cupidon (23), comportant :
une mémoire numérique de stockage (120, 130) conçue pour stocker un choix de produits de maquillage pour les lèvres (91, 92, 93, 94, 95, 96, 97, 98, 99),
une unité de calcul et de traitement (110) couplée à la mémoire numérique (120, 130),
des moyens d’affichage (150) pour afficher à un utilisateur une première image virtuelle (1) comportant les lèvres,
un périphérique d’entrée utilisateur (155) apte à recevoir une entrée utilisateur pour redimensionner la première image (1) comportant les lèvres, afin de réaliser une deuxième image virtuelle (2),
caractérisé par le fait que la première image (1) comportant les lèvres est une image 3D.
Dispositif (1) selon la revendication 14, caractérisé par le fait que
les moyens d’affichage (150) sont conçus pour afficher à l’utilisateur le choix de produit de maquillage pour les lèvres (91, 92, 93, 94, 95, 96, 97, 98, 99), et
le périphérique d’entrée utilisateur (155) est apte à recevoir le choix de produit de maquillage de l’utilisateur (91, 92, 93, 94, 95, 96, 97, 98, 99), et
l’unité de calcul et de traitement (110) est apte à générer une troisième image virtuelle à partir de la première image virtuelle (1) ou de la deuxième image virtuelle (2) maquillée par le produit de maquillage (91, 92, 93, 94, 95, 96, 97, 98, 99) choisi par l’utilisateur.
Dispositif selon la revendication 14 ou 15, caractérisé par le fait que l’unité de calcul et de traitement (110) est agencée pour simuler la deuxième image virtuelle (2) à partir du volume de la lèvre supérieure (21) et du volume de la lèvre inférieure (22) et de la profondeur de l’arc de Cupidon (23) des lèvres de la première image virtuelle (1).
Dispositif selon l’une quelconque des revendications 14 à 16, caractérisé par le fait qu’il comporte un dispositif grand public capable d’acquérir au moins une image par des moyens numériques et capable de proposer une teinte de la peau entourant les lèvres, en relation avec l’image acquise.