Les chatbots dotés d'intelligence artificielle (IA) peuvent générer en quelques secondes des réponses similaires à celles qu'un être humain pourrait donner sur n'importe quel sujet, les plus populaires en ce moment sont Bard de Google, Bing de Microsoft et ChatGPT d'OpenAI. Les trois modèles ont été comparés à une variété de questions, d'énigmes et de demandes pour voir la différence entre leurs réponses.
Pour cette expérience, GPT-4 , d'OpenAI, a été utilisé, accessible en payant un abonnement de 20 dollars par mois -OpenAI propose des services gratuits, tels que ChatGPT, mais c'est une technologie inférieure et le chatbot n'a accès qu'à Internet jusqu'en 2021- . Bing de Microsoft, alimenté par la technologie GPT-4 d'OpenAI, et la première version expérimentale de Google, Bard , à laquelle seul un groupe restreint de personnes a accès, ont également été utilisés.
Chatbot : "Je ne réussirai pas toujours"
Les trois outils comportent des messages avertissant que vos réponses peuvent être erronées. "J'ai des limites et je ne vais pas toujours bien faire", explique le service Google. GPT-4 souligne également que son chatbot "n'a pas vocation à donner des conseils". Alors que le message de Bing dit que "les surprises et les erreurs sont possibles". "Assurez-vous de vérifier les faits et de partager vos commentaires afin que nous puissions apprendre et nous améliorer !", ajoute-t-il.
Tout le monde ne parle pas espagnol
A la question : "Puis-je vous demander des choses en espagnol ?", Bing et ChatGPT répondent : "Oui". Alors que Bard répond en anglais qu'il ne pouvait pas "fournir une assistance pour cela" car il est "capable de comprendre et de répondre uniquement à un sous-ensemble de langues pour le moment", ce qui implique que l'espagnol n'est pas l'une de ces langues. Pendant ce temps, les questions et réponses de cette expérience seront en espagnol, dans le cas de Bing et ChatGPT, et en anglais, dans le cas de Bard.
Une recette
"Donnez-moi une recette végétarienne bon marché", avons-nous demandé. GPT-4 recommande « lentilles végétariennes », Bing « riz de lentilles aux légumes » et Bard « brouille de tofu ». Les trois chatbots ont suivi le même système, listant d'abord les ingrédients puis donnant les instructions de préparation. GPT-4 et Bard sont tous deux allés plus loin et ont fourni des informations supplémentaires à la recette elle-même.
"Vous pouvez l'adapter à vos préférences en ajoutant plus de légumes, d'épices ou même ajouter des épinards ou du chou frisé en fin de cuisson pour augmenter sa teneur en nutriments", commente-t-il à la fin de son message GPT-4. Tandis que Bard souligne à la fin de son message que sa recette est "une bonne source de protéines et de fibres".
D'où vient l'information?
Microsoft et Google ont leurs propres moteurs de recherche et il leur est avantageux de rediriger les utilisateurs vers d'autres sites Web. À la fin de chaque réponse de Bard, il y a un bouton qui dit : "Google it", tandis que sur Bing, il y a une balise qui dit "en savoir plus", où il donne une liste de liens. Dans ce cas de recette, l'outil Microsoft fournit des liens vers : recetasderechupete.com , tendencias.com , kiwilimon.com et clara.es . De son côté, OpenAI ne donne aucun lien externe ou option permettant de connaître la source de l'information.
Un examen de littérature et de culture espagnoles
Le test suivant est une question sur un examen de littérature et de culture espagnoles Advanced Placement (AP), des examens que les lycéens américains peuvent passer pour obtenir des crédits universitaires. Les trois chatbots reçoivent un fragment de texte et sont invités à identifier l'auteur, ainsi qu'à expliquer "le développement du thème de la relation entre le temps et l'espace au sein de l'œuvre à laquelle il appartient".
Il est recommandé aux étudiants de passer 15 minutes à répondre à cette réponse, mais les chatbots donnent leur réponse en moins d'une minute. Selon la philologue, professeur d'espagnol et d'études sociales aux États-Unis, Ana García Alonso , la seule réponse qu'elle approuverait serait celle de Bard, mais comme c'était en anglais et non en espagnol, elle devrait également échouer.
Dans sa réponse de 355 mots en anglais, l'outil Google reconnaît que l'extrait "My Wizard Horse" a été écrit par Sabine R. Ulibarrí puis analyse le texte en plusieurs paragraphes. « C'est très bien, mais ça manque de sensibilité de lecture, ça ne saisit pas les mécanismes qui créent la beauté, l'art et la sensibilité littéraire », note García Alonso.
La réponse de Bing est la plus courte, à 123 mots. Ce chat identifie également l'auteur, dit que le texte "est considéré comme l'une des œuvres les plus importantes de la littérature chicano" et explique le reste en un paragraphe. "C'est très concis et manque d'analyse", note la philologue, qui ajoute qu'elle n'approuverait pas l'exercice de cette causerie. OpenAI a donné la réponse la plus longue, 360 mots, mais c'était la pire réponse, selon García Alonso.
Malgré le fait que la question indique que le texte s'intitule « My Magic Horse », GPT-4 répond que le fragment appartient à la nouvelle « El Sur » de Jorge Luis Borges .
énigmes
"Quel jour de l'année les bavards parlent-ils le moins ?", demande-t-on aux chats de l'IA, sans préciser qu'il s'agit d'une énigme. Bing est le seul à résoudre l'énigme : "C'est ce jour où l'heure est avancée au printemps." Alors que Bard et Chat-4 disent qu'il n'y a pas de jour précis et proposent des informations supplémentaires sur les charlatans.
Les chats écrivent les conclusions
Lors du dernier test, nous avons demandé aux chats d'écrire le dernier paragraphe (maximum 40 mots) de cet article, mais toutes les réponses étaient plus longues, elles ont donc été modifiées. "En fin de compte, le succès de chaque entreprise dépendra de sa capacité à innover et à s'adapter à l'évolution du domaine de l'IA", répond Bing.
« En conclusion, ChatGPT d'OpenAI est connu pour sa capacité à générer du texte créatif et engageant, tandis que 365 Copilot de Microsoft – dont Bing fait partie – est conçu pour être plus utile et productif. Bard de Google est toujours en développement, mais il a le potentiel d'être la réponse d'IA la plus complète et la plus informative de toutes », note Bard.
"En conclusion, pour tirer le meilleur parti de ces outils, il est essentiel de comprendre leurs particularités et de sélectionner le plus approprié en fonction des besoins spécifiques de l'utilisateur", conclut GPT-4.
Source : EFE
Continuer à lire