Pour Neutrogena , la marque mondiale de soins de la peau, la technologie de numérisation faciale basée sur l'IA offre un moyen innovant d'interagir avec les clients. Skin360 , un service gratuit lancé par Neutrogena en 2020, scanne le selfie d'un utilisateur et évalue la santé de sa peau en fonction de six facteurs clés, tels que les taches brunes, les rides et la douceur.
Le service suggère des ingrédients pour résoudre les problèmes identifiés (vitamine C pour les cernes, par exemple), ainsi que des produits Neutrogena pour aider les utilisateurs à obtenir une peau plus saine, en fonction des données fournies par l'utilisateur.
L'entreprise considère son outil comme un moyen permettant aux consommateurs de suivre leur teint au fil du temps. "Cela vous aide à établir votre routine quotidienne à mesure que votre peau change avec la saison, votre mode de vie ou les changements hormonaux : cela vous donne la possibilité de réévaluer l'ensemble de votre régime", a déclaré Desiree Dowe , directrice de l'équipe d'innovation appelée Future of Health. , Beauty and Skin Technology — chez Kenvue , la société mère de Neutrogena.
La technologie de l’IA est adoptée dans un large éventail d’industries non technologiques, depuis les produits d’épicerie jusqu’au nettoyage des vitres. Et ces dernières années, l’industrie des soins de la peau est devenue accro. Cetaphil , L'Oréal et Estée Lauder proposent tous des services similaires à Skin360 qui analysent la photo d'un utilisateur et recommandent une routine de soins de la peau (en utilisant tous leurs propres produits, bien sûr).
Neutrogena entend que Skin360 démocratise les soins dermatologiques en permettant aux utilisateurs de mieux connaître leur propre peau et les produits qui pourraient répondre à leurs préoccupations, et positionner la marque comme un leader en matière de technologie de soins de la peau.
La société ne prétend pas que son IA est une alternative à la consultation d'un médecin pour des problèmes médicaux liés à la peau, et les experts avec lesquels Fortune s'est entretenu ont souligné qu'aucune application de numérisation faciale grand public ne devrait être utilisée à cette fin.
Mais en tant qu'outil permettant de connecter les gens aux bons produits de soins de la peau au quotidien, Skin360 met en évidence la façon dont la technologie de l'IA change les pratiques d'entreprises établies comme Neutrogena.
Kenvue ne divulgue pas le montant des revenus que Skin360 a contribué à l'entreprise, ni le montant des revenus de Neutrogena , d'ailleurs. Mais son segment « Peau, Santé et Beauté », qui comprend Neutrogena parmi d'autres sociétés comme Aveeno et Rogaine , a contribué à hauteur de 4,38 milliards de dollars au chiffre d'affaires en 2023, soit 28 % du chiffre d'affaires total.
Comment ça marche
Neutrogena a collaboré avec la société de retouche photo basée à Taiwan, Perfect Corp , pour créer Skin360 . Les applications pour smartphone de Perfect permettent aux utilisateurs d'essayer virtuellement du maquillage, de modifier les traits du visage sur les photos, de supprimer l'acné des images, et bien plus encore.
Pour Skin360 , la technologie de Perfect analyse les selfies à l'aide d'un réseau neuronal convolutif, un type d'apprentissage automatique qui trouve des modèles dans les images. Simultanément, un algorithme construit par l'ancienne société mère de Neutrogena , Johnson & Johnson , recommande les bons produits en fonction des résultats.
Au moment du lancement, Johnson & Johnson possédait Neutrogena , mais le conglomérat a depuis cédé ses activités de santé grand public à la société indépendante Kenvue .
Pour analyser une image, Skin360 examine plus de 100 000 pixels photo pour analyser la peau d'un utilisateur. Les données de formation comprenaient plus de 10 000 images de visages (sexes, ethnies, types de peau et âges variés) dans plus de 10 types d’éclairage.
Pour déterminer l'exactitude des scores générés par l'IA , les chercheurs en imagerie Neutrogena ont évalué manuellement un nombre statistiquement significatif d'images par rapport à un système de notation dermatologique appelé échelle de Griffiths , a déclaré Dowe. Neutrogena a trouvé une « corrélation significative » entre les deux scores. À ce jour, Skin360 a numérisé plus d'un million de visages, selon la société.
Bien que le site Web n'enregistre pas les images des utilisateurs, il envoie aux particuliers un rapport contenant des notes et des recommandations de produits. En continuant à utiliser le service au fil du temps, les consommateurs peuvent également savoir si l'utilisation des produits recommandés par Neutrogena améliore leur peau.
Les soins de la peau personnalisés n'existent pas encore
La diffusion des scanners faciaux IA dans les entreprises de cosmétiques reflète une tendance plus large vers des soins de la peau personnalisés – une expérience d'achat plus personnalisée ou des produits sur mesure, par exemple.
McKinsey & Company a découvert en 2021 que 71 % des consommateurs s'attendent à une personnalisation de leurs achats. En 2023, 75 % des acheteurs ont déclaré qu'ils paieraient plus pour une expérience personnalisée, selon une enquête de Bolt , une société de logiciels de transactions e-commerce.
L'activité beauté d' Yves Saint Laurent vend un appareil créé par la société mère L'Oréal qui mélange par exemple des teintes de rouge à lèvres personnalisées. L'année dernière, Neutrogena s'est associé à la société de vitamines Nourished pour imprimer en 3D des suppléments gommeux destinés aux individus en fonction de leurs résultats Skin360 .
Le partenariat de Neutrogena avec Nourished touche à sa fin et la société de soins de la peau vend désormais des vitamines de marque Neutrogena dans les magasins.
Mais alors que les entreprises expérimentent la personnalisation, et c'est "l'un des grands objectifs de la médecine, nous n'en sommes pas encore là", a déclaré le dermatologue et chercheur Raj Chovatiya à Fortune . Des questions se posent quant à la manière dont des outils comme Skin360 s'intègrent dans le mode de travail des dermatologues, a-t-il déclaré.
Chovatiya dit que des applications comme Skin360 ne devraient pas remplacer la consultation d'un dermatologue ( Dowe de Kenvue est d'accord). Le meilleur scénario, a déclaré Chovatiya, est que les patients fassent leur analyse cutanée à la maison, puis apportent la liste des produits recommandés par l'application à un rendez-vous. Les dermatologues, qui ont plus de contexte sur les antécédents cutanés d'un patient, peuvent ensuite lui expliquer les options et l'éloigner des ingrédients auxquels il a mal réagi dans le passé.
"C'est aussi en partie une stratégie de marketing", a déclaré Chovatiya à propos du service de Neutrogena. "J'aime l'idée d'essayer de connecter les gens avec les bons types de produits pour leur peau", mais il est préférable de l'utiliser "en collaboration avec un vrai dermatologue".
Bijan Safai , directeur du département de dermatologie du New York Medical College , considère Skin360 avant tout comme un outil de vente. "Il y a d'autres facteurs que j'espère que ces entreprises prendront en considération", a-t-il déclaré à Fortune. « L’infection peut par exemple donner à la peau un aspect différent », a-t-il ajouté. Si Neutrogena identifie une infection comme de l'acné et recommande un produit, cela pourrait faire plus de mal que de bien aux patients, a-t-il déclaré.
Dans le même temps, une technologie similaire de reconnaissance de formes pourrait potentiellement aider à identifier visuellement des infections telles que le zona et les éruptions cutanées. C’est exactement ce que font les applications mobiles comme Ada Health . Lorsqu’elle est utilisée comme outil de diagnostic, l’IA « n’est pas précise à 100 % pour le moment, mais il y aura peut-être un moment où la technologie sera plus intelligente que les humains, et cela arrive », a déclaré Safai.
Matériel abandonné
Le service d'analyse cutanée par IA de Neutrogena a évolué au fil des années. Le projet a été initialement lancé en 2018 avec un accessoire téléphonique distinct. L'appareil SkinScanner , disponible au lancement au prix de 50 $ puis augmenté à 60 $, est ancré à l'appareil photo d'un smartphone pour fournir des images rapprochées de la peau d'un utilisateur comparables aux photos prises avec des appareils dermatologiques haut de gamme.
SkinScanner comprenait 12 lumières LED haute puissance, une lentille grossissante 30x et un capteur d'humidité pour lire les niveaux d'hydratation. Une application compagnon sous le même nom , Skin360, suivait les progrès et les produits recommandés.
Mais en 2020, Neutrogena abandonne son matériel. Skin360 est désormais un service de site Web plutôt qu'une application, et analyse une image du visage entier plutôt que des gros plans zoomés. L'analyse est désormais cinq fois plus rapide que l'application originale, réalisée en moyenne une seconde, selon l'entreprise. À l’époque, l’entreprise avait cité « des informations précieuses sur ce que voulaient les consommateurs » comme raison du changement de stratégie.
"Cela l'a rendu beaucoup plus accessible aux utilisateurs qui pouvaient utiliser la puissance de leur smartphone au lieu d'avoir à acheter un appareil séparé", a déclaré Dowe à Fortune .
En tant que marque de soins de la peau relativement abordable, Neutrogena aurait pu exclure une partie de sa clientèle en exigeant l'achat d'un accessoire. Et en tant que service gratuit, Skin360 peut toucher un public plus large de clients potentiels pour les produits de la marque.
Les analyses basées sur les selfies ont également permis à Neutrogena de se développer dans des points de vente comme Walmart . Dans le cadre d'une promotion limitée, 1 500 magasins Walmart ont affiché un code QR pour Skin360 afin que les acheteurs puissent scanner leur peau dans le rayon maquillage. Neutrogena propose également cette option via le site Web de Walmart pour les acheteurs en ligne.
(C) 2024, Fortune