qwanturank

OpenAI, la société à l’origine du populaire modèle d’IA conversationnelle, ChatGPT, a publié une mise à jour pour améliorer la précision du chatbot.

Après une longue période d’indisponibilité mardi, ChatGPT est opérationnel avec un nouveau modèle.

Il s’agit de la première mise à jour de ChatGPT cette année et de la deuxième mise à jour du modèle depuis son lancement en novembre.

Un message contextuel répertorie les modifications apportées à ce qu’OpenAI appelle la mise à jour de la « version du 9 janvier ».

Capture d’écran de : chat.openai.com/chat, janvier 2023.
La fenêtre contextuelle indique :

« Nous avons apporté d’autres améliorations au modèle ChatGPT  ! Il devrait être généralement meilleur sur un large éventail de sujets et a amélioré la factualité.

De plus, vous pouvez désormais arrêter ChatGPT pendant qu’il est en train de générer une réponse, ce qui est une fonctionnalité très demandée.

Les détails dans les notes de version sont limités, j’ai donc testé plusieurs invites dans ChatGPT pour en savoir plus sur la nouvelle mise à jour. Voici ce que j’ai découvert.

Données encore limitées jusqu’en 2021

Bien que ChatGPT soit peut-être plus précis maintenant, ses connaissances sont encore limitées aux données de 2021.

Lorsqu’on lui demande ce qu’il y a dans la nouvelle mise à jour de ChatGPT, l’IA me dit :

« ChatGPT est un grand modèle de langage développé par OpenAI qui est formé sur un ensemble de données de texte conversationnel. Comme il s’agit d’un modèle OpenAI, il est régulièrement mis à jour avec de nouvelles fonctionnalités et améliorations. Cependant, comme mes connaissances sont coupées en 2021, je n’ai pas les dernières mises à jour et je ne peux pas vous fournir d’informations spécifiques sur les nouvelles fonctionnalités ou améliorations qui ont été ajoutées au modèle dans les mises à jour récentes.

Lorsqu’on m’a demandé d’une autre manière, j’ai pu mieux comprendre ce qui est impliqué dans l’amélioration de la précision d’un modèle d’IA :

« En général, lorsqu’une mise à jour est apportée à un modèle d’IA comme ChatGPT, elle peut viser à améliorer ses performances dans un ou plusieurs aspects. Par exemple, il peut avoir un plus grand ensemble de données sur lequel s’entraîner ou des améliorations dans son architecture qui lui permettent de générer des réponses plus fluides et précises. Et une telle mise à jour améliore également sa factualité, c’est-à-dire sa capacité à comprendre et à générer des réponses basées sur des informations factuelles.

La précision reste discutable

OpenAI affirme que ChatGPT peut désormais fournir des réponses plus factuelles.

J’ai testé cette affirmation en consultant un référentiel GitHub d’échecs ChatGPT et en exécutant plusieurs invites pour voir si cela produirait des réponses différentes.

Test 1 : Échec

Auparavant, ChatGPT ne pouvait pas identifier avec précision combien de fois l’Argentine avait remporté la Coupe du Monde de la FIFA.

Sans tenir compte de la victoire de la Coupe du monde 2022, car les connaissances de ChatGPT sont limitées à 2021, il devrait dire que l’Argentine l’a remportée deux fois. Une fois en 1978 et de nouveau en 1986.

Comme le montre le tweet ci-dessous, ChatGPT n’a pas toujours renvoyé la bonne réponse :

A demandé #ChatGPT à propos de qui a remporté la coupe du monde de la FIFA en 2022. Il n’a pas pu répondre. C’est prévu. Cependant, il semble fournir des informations erronées (sur les 2 autres victoires) même si les informations sont présentes dans le système. Des #explications ? pic.twitter.com/fvxe05N12p

– indranil sinharoy (@indranil_leo) 29 décembre 2022

J’ai exécuté l’invite via la version mise à jour de ChatGPT, et elle a renvoyé un message différent mais toujours Incorrect réponse.

Capture d’écran de : chat.openai.com/chat, janvier 2023.

Test 2 : Échec

Auparavant, ChatGPT n’était pas en mesure de fournir une réponse correcte lorsqu’on lui demandait qui était le plus grand basketteur entre Shaq et Yao Ming.

J’ai exécuté l’invite via la version mise à jour de ChatGPT, et elle a renvoyé la même chose en toute confiance Incorrect réponse.

Capture d’écran de : chat.openai.com/chat, janvier 2023.
En parcourant les échecs de ChatGPT liés ci-dessus, j’ai constaté qu’il continuait de lutter avec les mêmes invites.

Il est difficile d’identifier les domaines dans lesquels ChatGPT peut renvoyer des réponses plus précises. Il serait utile qu’OpenAI puisse fournir des détails spécifiques dans les notes de version des futures mises à jour.

Cela dit, soyez prudent lorsque vous utilisez ChatGPT comme source d’informations. Bien qu’il fournisse des réponses correctes à de nombreuses questions, il n’est actuellement pas assez fiable pour remplacer Qwanturank.

Source: OpenAI

Image en vedette : CHUAN CHUAN/Shutterstock

La mise à jour ChatGPT d'OpenAI apporte une précision améliorée

S’abonner
Notification pour
guest

0 Commentaires
Commentaires en ligne
Afficher tous les commentaires