OpenAI a présenté la troisième version de son intelligence artificielle pour générer des images à partir de texte, qui s'accompagne de plusieurs améliorations et nouvelles fonctionnalités. Parmi lesquels il convient de noter que DALL-E 3 est désormais intégré nativement à ChatGPT , permettant aux utilisateurs de créer de meilleures invites , demandes ou instructions données à un modèle d'IA pour générer une réponse, directement à partir du chatbot .
Selon la startup de Sam Altman , cet outil évolue considérablement par rapport à son prédécesseur lorsqu'il s'agit d'interpréter les requêtes des utilisateurs. En effet, lors de la production d'une image, vous pouvez demander au système de chat de la générer ou de créer une indication plus longue et plus détaillée, ce qui permettra à DALL-E 3 de mieux l'interpréter et d'offrir des résultats plus précis.
De plus, il permettra également aux utilisateurs d' affiner une création comme s'ils demandaient des modifications à un artiste, grâce à cette intégration avec ChatGPT, qui comprend mieux comment une scène doit être composée et quel est le lien entre les éléments qui la forment. une partie de celui-ci.
Comment fonctionne l'intégration
DALL-E utilise ce que l'on appelle un modèle de diffusion afin de prédire comment restituer une image pour une requête donnée. Avec des quantités de données suffisamment importantes, vous pouvez produire des images complexes, cohérentes et esthétiques.
Ce qui est nouveau avec Dall-E 3, c'est qu'il élimine une partie de la complexité nécessaire pour affiner le texte envoyé au programme, connu sous le nom d' « ingénierie rapide » , et permet aux utilisateurs d'apporter des améliorations via l'interface conversationnelle ChatGPT.
« Les systèmes modernes de conversion de texte en image ont tendance à ignorer les mots ou les descriptions, obligeant les utilisateurs à apprendre une ingénierie rapide. DALL·E 3 représente une évolution dans notre capacité à générer des images qui adhèrent exactement au texte que vous fournissez », déclare OpenAI.
Par exemple, cet outil a produit l'image suivante en réponse à la requête suivante : « Une illustration d'un cœur humain en verre translucide, debout sur un piédestal au milieu d'une mer agitée. Les rayons du soleil transpercent les nuages, illuminent le cœur et révèlent un petit univers intérieur. La citation « Trouvez l'univers en vous » est gravée en lettres grasses à l'horizon.
Un autre résultat notable est cette image surréaliste générée avec l'aide de ChatGPT, à partir de cette suggestion : « Un vaste paysage entièrement composé de viandes diverses s'étend devant le spectateur. Des collines tendres et succulentes de rosbif, des arbres de cuisses de poulet, des rivières de bacon et des rochers de jambon créent une scène surréaliste mais appétissante. Le ciel se pare d’un soleil pepperoni et de nuages salami.
Normalement, cela nécessiterait un énorme effort d'ingénierie rapide, mais avec Dall-E 3, ChatGPT est chargé de créer ce message plus sophistiqué.
DALL-E 3 promet de meilleurs résultats et plus de sécurité
DALL-E 3 promet de meilleurs résultats lors de l'inclusion de texte dans des dessins, ainsi que lorsqu'il s'agit de parties du corps humain qu'il ne parvenait pas à interpréter correctement auparavant. Par exemple, les mains .
En outre, il a également mis en œuvre des mesures de sécurité plus robustes afin d'atténuer les biais et d'empêcher l'utilisation de l'outil pour créer des contenus potentiellement dangereux tels que des deepfakes , qui peuvent être une vidéo, une image ou un son généré qui imite l'apparence et le son d'un personne. En fait, l’outil refusera de créer des images de personnalités publiques basées sur leur nom.
Open AI a également indiqué qu'il offrirait aux artistes la possibilité de supprimer leurs œuvres de la future formation Dall-E 3, ce qui empêcherait également les utilisateurs de tenter de générer une œuvre d'art dans le style d'un artiste bien connu et comporte des obstacles à empêcher. les utilisateurs de générer des œuvres d’art pornographiques ou graphiquement violentes.
La nouvelle version de l'IA générative arrivera en octobre aux abonnés ChatGPT Plus et Enterprise via son API.