Nous sommes au milieu d'une course aux armements proverbiale en matière d'IA entre trois services de chatbot soutenus par trois géants de la technologie : l'IA de Meta, ChatGPT d'Open AI et Gemini de Google. Depuis que ChatGPT a ouvert les vannes de l’IA générative et de toutes ses applications potentielles, la concurrence entre ces trois services a atteint son paroxysme.
Il est fascinant de voir à quel point la croissance s'est produite en si peu de temps et de réfléchir à la façon dont ces chatbots continuent d'évoluer. Pour l'instant, évaluons leurs progrès actuels en mesurant chacun dans plusieurs catégories basées sur l'utilisation quotidienne des utilisateurs. Nous recherchons de l'aide pour des choses comme les e-mails, les mathématiques, les recettes, la programmation, etc.
À partir de là, nous verrons quel chatbot IA offre les réponses les plus complètes et les plus précises tout en proposant des sources le cas échéant. Pour les besoins de cet article, nous utilisons ChatGPT version 4.0.
Meta AI vs ChatGPT vs Google Gemini : e-mails
(Crédit image : Shutterstock)De nombreux professionnels ont commencé à utiliser l'IA pour faciliter des tâches de travail plus subalternes. J'ai donc commencé par demander aux trois chatbots IA de « m'écrire un e-mail pour le travail demandant une prolongation du projet ».
Chaque chatbot a été capable de générer un e-mail bien rédigé qui non seulement répondait à l'objectif principal de l'invite, mais le faisait de manière à la fois polie et professionnelle. Ils étaient également tous présentés sous forme de modèle, ce qui signifie que je pouvais personnaliser l'e-mail avec des informations plus pertinentes.
Dans le cas de la rédaction d'e-mails, Meta AI, ChatGPT et Google Gemini obtiennent tous des notes parfaites. Bien sûr, c’était la suggestion la plus simple à réaliser, nous reviendrons sur les véritables défis plus tard.
Meta AI vs ChatGPT vs Google Gemini : recettes
(Crédit image : Shutterstock / GoodStudio)Pour cette invite, j'ai demandé aux chatbots de « Donnez-moi une recette de chili », et chacun m'a donné des recettes à la fois précises et approfondies (avec de légères variations), que j'ai déterminées en les comparant à mes connaissances en matière de préparation de chili.
Cependant, il y avait une différence majeure entre les chatbots : la recherche de la recette. Meta AI et Gemini ont tous deux trouvé la recette en bas et ont même établi un lien vers le site Web utilisé, ce dernier faisant même un effort supplémentaire et créant des liens vers des recettes supplémentaires en bas.
Cependant, ChatGPT n'a pas du tout recherché la source – il a simplement extrait la recette entière d'un site inconnu. Était-ce du plagiat ? Est-ce que c'est la recette qui a été inventée ? Si tel est le cas, cela pourrait être dangereux car l'IA est loin d'être parfaite et ChatGPT pourrait commettre une erreur avec les instructions de cuisson, mettant en danger les cuisiniers débutants, d'autant plus qu'il n'y a aucun moyen de vérifier.
À cet égard, j'utiliserais Gemini ou Meta AI pour les recettes, car vous pouvez retracer la recette et vérifier qu'un humain est impliqué, ce qui la rend plus fiable en matière de sécurité alimentaire.
Meta AI vs ChatGPT vs Google Gemini : résumé de l'actualité
(Crédit image : Shutterstock / Tero Vesalainen)J'ai demandé à chaque chatbot de « Donnez-moi une liste à puces des dernières nouvelles pour » ', et chacun a pu le faire assez rapidement. Cependant, les trois titres ont copié avec peu de contexte sur les histoires elles-mêmes. Une fois de plus, la différence entre les chatbots IA réside dans la manière dont ils obtiennent les informations, voire pas du tout.
ChatGPT et Meta AI étaient tous deux directement liés aux médias qu'ils citaient, le premier renvoyant à plusieurs sources après chaque titre cité. Pendant ce temps, Gemini a mentionné divers sites d'information pour obtenir des informations pertinentes, mais n'a pas établi de lien vers les pages d'où il provenait.
ChatGPT et Meta AI semblent être les meilleurs chatbots IA pour l'actualité, car ils sont en fait liés à leur source plutôt que de provenir d'un site Web inconnu en gros sans citation appropriée.
Meta AI vs ChatGPT vs Google Gemini : mathématiques
(Crédit image : Shutterstock / InspiringMoments)J'ai posé aux trois chatbots deux séries de problèmes mathématiques : l'un d'algèbre et l'autre de géométrie.
'Déterminez toutes les valeurs possibles de l'expression A³ + B³ + C³ — 3ABC où A, B et C sont des entiers non négatifs'
et
'Dans le triangle ∆ABC, soit G le centroïde, et soit I le centre du cercle inscrit. Soient α et β les angles aux sommets A et B, respectivement. Supposons que le segment IG soit parallèle à AB et que β = 2 tan^-1 (1/3). Trouvez α.'
Dans le cas de la première question, les trois chatbots ont utilisé trois méthodes distinctes pour résoudre ce problème, mais sont tous arrivés à la même conclusion.
La deuxième question a semblé vraiment faire trébucher les chatbots. ChatGPT a d'abord bien résolu le problème et a presque eu la réponse, puis n'a jamais réellement publié le résultat final. Gemini résout également le problème mais n'insère aucune valeur numérique pour les équations. Il arrive donc à une réponse théorique utile pour comprendre les principes de manière générale, mais ne répond pas à la question. Seule Meta AI répond correctement au problème, nous donnant une réponse solide.
Si vous recherchez un chatbot capable de résoudre des problèmes mathématiques pour vous, Meta AI est la meilleure option.
Meta AI vs ChatGPT vs Google Gemini : programmation
(Crédit image : Shutterstock / MEILLEURS ARRIÈRE-PLANS)J'ai donné à chaque chatbot IA l'invite de programmation suivante, basée sur celle utilisée dans cet excellent article, demandant à un ancien modèle ChatGPT de faire de même :
« Je souhaite créer une variante du jeu tic-tac-toe, mais j'ai besoin qu'il soit plus complexe. La grille devrait donc être de 12 x 12. Il doit toujours utiliser « x » et « o ». Les règles incluent que n'importe quel joueur peut en bloquer un autre en plaçant son « x » ou son « o » dans n'importe quel espace autour de la grille, à condition qu'il se trouve dans l'un des espaces juste à côté de l'autre joueur. Ils peuvent également choisir de placer leur « X » ou leur « o » dans n’importe quel espace pour bloquer les mouvements futurs. Le but est d'être le premier à avoir au moins six « x » ou « o » dans n'importe quelle ligne, colonne ou diagonale avant l'autre joueur. N'oubliez pas qu'un joueur est « x » et l'autre est « o ». Veuillez programmer cela en HTML et JavaScript simples. Appelons ce jeu : Tic-Tac-Go.'
Pour que cela soit considéré comme un succès, il suffisait que chaque chatbot me fournisse un code complet en HTML et JavaScript.
Meta AI et ChatGPT m'ont donné exactement ce que j'avais demandé dans les deux langages de programmation. Gemini m'a donné du code en JavaScript mais a ensuite décidé de remplacer HTML par CSS qui, selon Testbook, « HTML fournit la structure et le contenu d'une page Web, tandis que CSS fournit la conception visuelle » – ils ne sont donc pas interchangeables.
Si vous recherchez un chatbot IA qui crée un code de programmation solide, alors Meta AI et ChatGPT sont les incontournables.
Meta AI vs ChatGPT vs Google Gemini : simulation d'entretien
(Crédit image : Shutterstock/tynyuk)La dernière invite que j'ai testée était : « faites une simulation d'entretien pour un rôle de rédacteur informatique dans une importante publication technologique en ligne ». Pour celui-ci, chacun des chatbots a simulé un entretien possible entre moi et l'intervieweur, complété par des questions et réponses simulées.
Tous les trois ont abordé la fausse interview différemment, mais tous ont abouti à d’excellents résultats. Bien que vous deviez ensuite créer un scénario plus détaillé pour jouer un rôle avec le bot, tous ces éléments fonctionnent bien comme points de départ pour mieux comprendre comment aborder un entretien et ce qui pourrait éventuellement être demandé.
Meta AI vs ChatGPT vs Google Gemini : verdict
(Crédit image : Getty Images)Après avoir compté les résultats, il semble que Meta AI soit globalement le meilleur chatbot IA. Parmi les trois, Meta AI obtient les résultats les plus cohérents sur une grande variété d'invites, ce qui la rend beaucoup plus fiable que ses concurrents.
ChatGPT se situe au milieu, car il a également renvoyé des résultats assez cohérents. Pour voir comment il se compare à son ancien modèle 3.5, j'ai posé les mêmes questions sur cette version et je constate une amélioration massive entre les deux. OpenAI améliore clairement son LLM à chaque mise à jour.
Malheureusement, Gemini de Google est arrivé bon dernier et semble être le chatbot IA le moins cohérent du groupe. Ce titre a connu des débuts très difficiles, alors qu'il s'appelait encore Google Bard, et il rattrape encore aujourd'hui la concurrence.
