Pourquoi vous ne devriez pas faire confiance à ChatGPT pour résumer votre texte

Pourquoi vous ne devriez pas faire confiance à ChatGPT pour résumer votre texte

Principaux points à retenir

  • ChatGPT peut mal interpréter les messages, s’écarter des instructions et ne pas reconnaître des mots spécifiques. Soyez précis et surveillez ses réponses.
  • ChatGPT peut omettre des détails ou modifier le contenu si des instructions claires ne sont pas fournies. Planifiez soigneusement les messages pour garantir des résumés précis.
  • ChatGPT peut utiliser des alternatives erronées, omettre ou modifier des éléments et obtenir des informations erronées. Modifiez sa sortie et structurez les invites pour obtenir les meilleurs résultats.

ChatGPT a ses limites. Et sa programmation le force à fournir ce que vous demandez, même si le résultat est erroné. Cela signifie que ChatGPT fait des erreurs, et de plus, il fait des erreurs courantes, en particulier lorsqu’il résume des informations et que vous n’y prêtez pas attention.

ChatGPT peut ignorer ou mal comprendre votre message

Si vous donnez au chatbot beaucoup de données à trier, même une invite complexe, il est susceptible de s’écarter de vos instructions et de suivre sa propre interprétation de celles-ci.

Faire trop de demandes à la fois est l’une des nombreuses erreurs à éviter dans les invites de ChatGPT. Mais cela peut aussi se produire lorsque le chatbot ne reconnaît pas un mot ou une phrase particulière que vous utilisez.

Dans l’exemple suivant, ChatGPT a obtenu de nombreuses informations sur la fonction linguistique des émojis. L’invite, volontairement simple, demandait au chatbot de résumer le tout et d’expliquer les liens entre les émojis et les cultures.

ChatGPT interprète mal une invite

Le chatbot a fusionné les deux réponses en un seul paragraphe. Une invite de suivi avec des instructions plus claires lui a également demandé de puiser dans son bassin de connaissances.

ChatGPT décompose les informations comme indiqué

C’est pourquoi vous devez donner des instructions précises, fournir un contexte si nécessaire et garder un œil sur les résultats de ChatGPT. Si vous signalez immédiatement une erreur, le chatbot peut produire quelque chose de plus précis.

ChatGPT peut omettre les informations que vous fournissez

ChatGPT est intelligent, mais ce n’est pas une bonne idée de le bombarder de détails sur un sujet particulier sans préciser ce qui est important ou non.

Le problème ici est que, sans instructions appropriées, l’algorithme choisira les informations qu’il considère comme pertinentes pour le rapport ou la liste dont vous avez besoin.

Pour tester ChatGPT, il lui a été demandé de résumer un texte sur les destinations écossaises incontournables et de créer un itinéraire pour des vacances en famille.

ChatGPT résume les destinations de vacances

Lorsqu’on lui a demandé si elle avait omis des détails, elle a admis que oui, elle avait omis certaines informations, comme des attractions spécifiques et des options de transport. Son objectif était la concision.

ChatGPT omet des informations

Si vous le laissez faire, il n’y a aucune garantie que ChatGPT utilisera les informations que vous attendez. Planifiez et formulez donc soigneusement vos invites pour vous assurer que le résumé du chatbot est exact.

ChatGPT peut utiliser des alternatives erronées ou fausses

OpenAI a mis à jour GPT-4o avec des données disponibles jusqu’en octobre 2023, tandis que la date limite de GPT-4 Turbo est décembre de la même année. Cependant, les connaissances de l’algorithme ne sont pas infinies ni fiables avec des faits en temps réel : il ne connaît pas tout du monde. De plus, il ne révélera pas toujours qu’il lui manque des données sur un sujet particulier, à moins que vous ne le lui demandiez directement.

Lors de la synthèse ou de l’enrichissement d’un texte contenant de telles références obscures, ChatGPT est susceptible de les remplacer par des alternatives qu’il comprend ou de fabriquer leurs détails.

L’exemple suivant concerne une traduction en anglais. ChatGPT n’a pas compris le nom grec des récompenses de la Toque d’Or, mais au lieu de mettre en évidence le problème, il a simplement proposé une traduction littérale et erronée.

ChatGPT se trompe de nom lors de la traduction

Les noms d’entreprises, les livres, les récompenses, les liens de recherche et d’autres éléments peuvent disparaître ou être modifiés dans le résumé du chatbot. Pour éviter des erreurs majeures, soyez conscient des limites de création de contenu de ChatGPT.

ChatGPT peut se tromper sur les faits

Il est important d’apprendre tout ce que vous pouvez sur la façon d’éviter les erreurs avec les outils d’IA générative. Comme le montre l’exemple ci-dessus, l’un des plus gros problèmes de ChatGPT est qu’il manque certains faits ou les a mal appris. Cela peut alors affecter tout texte qu’il produit.

Si vous demandez un résumé de divers points de données contenant des faits ou des concepts inconnus de ChatGPT, l’algorithme peut les formuler de manière incorrecte.

Dans l’exemple ci-dessous, l’invite demandait à ChatGPT de résumer quatre tendances TikTok et d’expliquer ce que chacune implique.

ChatGPT crée un résumé des tendances TikTok

La plupart des explications étaient légèrement erronées ou manquaient de précisions sur ce que les utilisateurs devaient faire. La description de la tendance UMG Music était particulièrement trompeuse. La tendance a changé après le retrait du catalogue de TikTok, et les utilisateurs publient désormais des vidéos pour critiquer, et non pour soutenir UMG, ce que ChatGPT ignore.

ChatGPT explique une tendance TikTok de manière erronée

La meilleure solution est de ne pas faire aveuglément confiance aux chatbots IA avec votre texte. Même si ChatGPT a compilé des informations que vous avez fournies vous-même, assurez-vous de modifier tout ce qu’il produit, de vérifier ses descriptions et ses affirmations et de noter tous les faits erronés. Vous saurez alors comment structurer vos messages pour obtenir les meilleurs résultats.

ChatGPT peut se tromper sur les limites de mots ou de caractères

Même si OpenAI améliore ChatGPT avec de nouvelles fonctionnalités, il semble toujours avoir du mal avec les instructions de base, telles que le respect d’une limite de mots ou de caractères spécifique.

Le test ci-dessous montre que ChatGPT a besoin de plusieurs invites. Il n’a toujours pas réussi à obtenir le nombre de mots requis ou l’a dépassé.

ChatGPT essaie de s'en tenir aux instructions sur le nombre de mots

Ce n’est pas la pire erreur à laquelle on peut s’attendre de la part de ChatGPT. Mais c’est un facteur supplémentaire à prendre en compte lors de la relecture des résumés qu’il crée.

Soyez précis quant à la longueur que vous souhaitez donner au contenu. Vous devrez peut-être ajouter ou supprimer quelques mots ici et là. Cela vaut la peine si vous travaillez sur des projets avec des règles strictes en matière de nombre de mots.

D’une manière générale, ChatGPT est rapide, intuitif et en constante amélioration, mais il fait toujours des erreurs. À moins que vous ne souhaitiez des références étranges ou des omissions dans votre contenu, ne faites pas entièrement confiance à ChatGPT pour résumer votre texte.

La cause réside généralement dans des faits manquants ou déformés dans son pool de données. Son algorithme est également conçu pour répondre automatiquement sans toujours vérifier l’exactitude. Si ChatGPT reconnaissait les problèmes qu’il a rencontrés, sa fiabilité augmenterait. Pour l’instant, la meilleure solution consiste à développer votre propre contenu avec ChatGPT comme assistant pratique qui nécessite une supervision fréquente.

Soutenez notre effort ❤️

Si vous avez apprécié cet article, pensez à laisser un pourboire pour nous aider à continuer à publier du contenu de qualité.

Paiement sécurisé sur PayPal
Voir aussi:  Le règlement de 1,5 milliard de dollars d'Anthropic approuvé définitivement dans une affaire de droit d'auteur sur l'IA
Moyens I/O Staff est une équipe de rédacteurs spécialisés, passionnés par la technologie, l’innovation et les usages numériques. Forts d’une expertise pointue en IA, applications mobiles, gaming et tendances digitales, nous produisons un contenu rigoureux, vérifié et utile. Notre mission : vous offrir une information fiable et claire pour mieux naviguer dans le monde numérique en constante évolution. Découvrez les avis de nos lecteurs sur Trustpilot.