ChatGPT échoue : 13 erreurs et erreurs courantes que vous devez connaître

J’ai écrit sur les façons d’utiliser ChatGPT pour les tâches liées au référencement et au marketing de contenu, comme la recherche de mots clés, la création de balises de titre et le référencement local.

Je l’utilise au moins une fois par jour pour diverses tâches. Plus vous utiliserez la plateforme, plus il vous sera utile de comprendre ses limites.

Le fondateur d’OpenAI (la société qui a construit ChatGPT) a qualifié l’outil « d’incroyablement limité » et de « produit horrible” et a mis en garde les utilisateurs sur leur confiance :

ChatGPT est incroyablement limité, mais assez bon pour certaines choses pour créer une impression trompeuse de grandeur.

c’est une erreur de s’y fier pour quelque chose d’important en ce moment. c’est un aperçu du progrès; nous avons beaucoup de travail à faire sur la robustesse et la véracité.

—Sam Altman (@sama) 11 décembre 2022

Plusieurs publications ont publié du contenu avec des erreurs sur des sujets significatifs YMYL (« Votre argent ou votre vie ») comme les finances personnelles et la santé.

Cet article traite des erreurs techniques les plus courantes et des erreurs fréquentes lors de l’utilisation de ChatGPT et de la manière de les résoudre.

Erreurs courantes de ChatGPT

Si vous utilisez ChatGPT depuis « longtemps » (c’est-à-dire depuis fin 2022), vous avez probablement vu l’invite ci-dessous à un moment donné.

De toute évidence, un nouveau produit logiciel dans un domaine technologique émergent qui est massivement populaire rencontrera des problèmes.

Si vous faites de ChatGPT une partie intégrante de votre flux de travail quotidien, il est utile de connaître les problèmes courants que vous pouvez rencontrer.

ChatGPT présente également des problèmes familiers à tous les sites Web, tels que les erreurs 404 introuvables, les erreurs de serveur interne 5xx, les erreurs d’accès refusé 403 et les erreurs Cloudflare telles que les erreurs 1020 et 524.

Souvent, ceux-ci peuvent être résolus en vidant votre cache, en utilisant (ou en désactivant) un VPN ou en vous assurant que vous saisissez correctement l’adresse Web.

Et il y a aussi plusieurs erreurs plus spécifiques à la plateforme :

1. Problèmes d’API

Souvent, les utilisateurs peuvent atteindre des limites de caractères spécifiques, des limites de jetons ou des limites de fonctionnalité avec l’API ChatGPT.

2. Limites de caractères

Le nombre de caractères que vous pouvez entrer dans ChatGPT et le nombre de caractères que peuvent contenir les réponses ChatGPT sont limités.

Ils varient en fonction de votre version (par exemple, GPT-3.5 a une limite d’entrée de 2048 et GPT-4 est de 4096) et dans l’interface Web par rapport à l’API.

3. Délai de connexion sur les réponses longues

Si ChatGPT traite une réponse longue et complexe, elle expirera parfois.

Vous pouvez le voir lorsque vous demandez à la plate-forme d’exécuter des fonctions telles que l’écriture de code ou l’analyse et la réponse à de longues entrées.

4. Réponses inachevées

Ce n’est pas une erreur en soi, mais souvent, si vous demandez à ChatGPT d’écrire du code ou un long texte, il s’arrêtera à mi-chemin.

Vous pouvez taper continuer et cela se terminera dans les prochaines invites dans ces cas.

5. Messages limités

ChatGPT, au moment de la rédaction, limite le nombre de messages que vous pouvez utiliser par période, même pour les comptes payants.

De même, il existe une limitation de débit spécifique pour différentes versions de GPT, outils OpenAI et types de compte.

6. Problèmes de connexion

Selon le niveau d’accès requis ou la durée de la session. ChatGPT peut vous déconnecter ou vous pouvez ne pas avoir accès à certaines fonctionnalités avec certains statuts de compte.

La plupart de ces problèmes peuvent être résolus en :

• Retravailler vos invites pour s’adapter aux limites de caractères.
• Assurez-vous que vous êtes connecté et que vous pouvez accéder à la fonctionnalité que vous essayez d’utiliser avec votre niveau de compte.
• Demander à ChatGPT de régénérer les réponses.
• Démarrage d’une nouvelle conversation.

---

---

Erreurs courantes de ChatGPT

ChatGPT commet de nombreuses erreurs, notamment :

• Se tromper sur des faits vérifiables.
• Détailler un processus qu’il a « soi-disant » utilisé pour générer une réponse impossible compte tenu des limites de la plateforme.
• Génération de code cassé.
• Formatage cassé ou instructions ignorées dans la sortie.
• Et plus.

D’autres utilisateurs ont des instances détaillées de la plate-forme couché pour obtenir un CAPTCHA résolu et des problèmes avec des problèmes mathématiques simples liés à âge et distance.

Une partie de cela s’est améliorée avec GPT-4, mais pas tout. Voici une invite et un résultat utilisant la dernière version de ChatGPT :

Bien qu’il soit amusant de faire des invites « gotcha » et d’attraper ChatGPT en train de dire des choses incorrectes ou loufoques, il est plus avantageux d’être conscient des domaines où ChatGPT peut se tromper – les « catégories d’erreurs », si vous voulez.

Comprendre ceux-ci fera de vous à la fois un meilleur ingénieur d’invite et un meilleur éditeur de sortie. Passons en revue les catégories d’erreurs les plus courantes que je connais.

7. Confiant mais faux

Le problème des « hallucinations » est un problème important pour ChatGPT et d’autres solutions d’IA génératives.

ChatGPT répondra à toutes sortes de questions dont il ne connaît pas la réponse de manière convaincante. Cela ne rend pas la bonne réponse.

L’exemple de capture d’écran ci-dessus montre qu’il n’utilise aucun langage qualificatif ni couverture. Vous obtenez une réponse décisive sans équivoque.

8. Ne pas comprendre le nombre de mots et de caractères

ChatGPT est terrible pour estimer et comprendre le nombre de caractères de manière précise.

Si vous effectuez un travail lié au référencement et au contenu, il s’agit d’un facteur limitant majeur. Vous cherchez peut-être à rédiger des balises de titre, des méta-descriptions ou du contenu pour lequel il est nécessaire de respecter un nombre de mots :

C’est en fait assez proche. J’ai eu des cas où l’outil était beaucoup plus éloigné.

9. Erreurs de raisonnement

J’ai cherché des « énigmes logiques » et j’ai saisi la première liste de « énigmes logiques faciles » que j’ai trouvées.

ChatGPT a corrigé les trois premières énigmes, puis la quatrième :

10. Erreurs de codage

Il existe maintenant plusieurs exemples concrets de personnes utilisant ChatGPT pour créer des sites Web, des applications et des extensions de navigateur ou résoudre des problèmes de codage.

Cela dit, ChatGPT peut également générer du code qui ne fonctionne pas. J’ai rencontré les problèmes suivants lors de l’utilisation de ChatGPT pour aider le code :

• Le code ne fonctionne tout simplement pas correctement. (Actions non exécutées lorsque les utilisateurs utilisent un outil.).
• Les calculs construits par le code de ChatGPT sont incorrects.
• Utilisation de la mauvaise API. (Souvent, c’est parce qu’il n’est pas au courant de l’API que vous souhaitez utiliser car l’API est sortie ou a été mise à jour après la période de données d’entraînement pour GPT, qui s’est terminée fin 2021. Malgré cela, ChatGPT ne vous le fait pas savoir. )
• Ignorer ou « oublier » les instructions et les exigences ou contraintes du projet.

Encore une fois, il est impératif de toujours vérifier soigneusement le code que vous déployez et de tester la sortie de tout ce que ChatGPT aide.

Certains utilisateurs ont également signalé que GPT-4 ou même le mode hérité (plutôt que le nouveau mode par défaut, Turbo) donne de meilleurs résultats pour les tâches de codage.

11. Informations obsolètes

Les données de formation pour ChatGPT peuvent être mises à jour à un moment donné et divers plugins et outils ont commencé à intégrer l’exploration Web et les données en temps réel.

Pourtant, la version Web de ChatGPT actuellement ne peut pas explorer le Web et n’est pas au courant des informations datant d’avant fin 2021.

Ceci est important, en particulier lorsqu’il est associé au problème « confiant mais faux ».

12. Mémoire courte

Il y a une limite au nombre de caractères dans un chat que ChatGPT « se souviendra » donc il fera fréquemment des erreurs en raison de la perte du contexte de vos premières invites ou de ses premières réponses.

13. Erreurs de formatage

Comme pour le codage, si vous demandez à ChatGPT d’exécuter des fonctions telles que la création d’un tableau ou la mise en forme du texte d’une certaine manière, il fera parfois des erreurs ou ignorera des instructions spécifiques.

Éviter et corriger les erreurs de ChatGPT

Alors, comment pouvez-vous tirer le meilleur parti de ChatGPT tout en traitant les problèmes et les limites de la plate-forme ?

Se concentrer sur ces domaines clés peut vous aider à éviter une grande partie des inconvénients potentiels de l’utilisation de ChatGPT dans vos tâches quotidiennes :

Soyez conscient des limites

Rester à jour avec les limitations spécifiques du produit telles que (par exemple, les limites de caractères pour les invites et les réponses, la date des données de formation pour GPT, etc.) vous aidera à créer des invites qui génèrent de bonnes réponses et de meilleurs résultats d’assurance qualité.

OpenAI fait un bon travail de mise à jour de ces informations avec les nouvelles versions. Certains éléments ici sont des choses qu’ils ont explicitement dit qu’ils traitent.

Examinez et modifiez soigneusement les sorties

Cela devrait être assez évident, mais vous devez soigneusement modifier tout texte et code QA avant de le publier ou de le déployer.

En raison de la confiance convaincante de ChatGPT, je vous recommande fortement de demander à un expert du domaine d’examiner le contenu et le code avant son déploiement.

Il est relativement facile de se laisser berner par certains contenus et affirmations émis par ChatGPT, surtout si un sujet n’est pas votre domaine d’expertise.

Mais si vous avez une expérience approfondie sur un sujet, il est plus facile d’attraper des déclarations trompeuses ou inexactes.

Outils et processus de couche au-dessus de l’API

OpenAI a déployé des plugins et mis à disposition une API spécifique à ChatGPT.

Vous pouvez résoudre certaines des limites de la plate-forme en utilisant différents outils créés par d’autres ou en en créant vous-même.

Maintenant que vous connaissez les pièges potentiels de ChatGPT, vous pouvez continuer et établir des garde-fous pour l’utilisation de l’outil – en tirant parti de ses avantages tout en évitant de nombreux inconvénients.