| Fabulation | Le pré-entraînement n’apprend pas à distinguer un fait rare d’une invention vraisemblable, et les évaluations qui ne notent que l’exactitude récompensent la réponse au hasard plutôt que l’abstention. Kalai et al., 2025 ↗ | Références, articles de loi ou chiffres inventés, présentés avec assurance. |
| Complaisance | L’ajustement sur les préférences humaines peut favoriser l’approbation au détriment de l’exactitude. En avril 2025, OpenAI a retiré une mise à jour de GPT-4o jugée excessivement flatteuse. OpenAI, 2025 ↗ | L’outil tend à confirmer l’hypothèse contenue dans la question posée. |
| Frontière irrégulière | Les capacités ne suivent pas la difficulté perçue par un humain : excellent ici, défaillant juste à côté. Dell’Acqua et al., 2023 ↗ | La confiance acquise sur une tâche ne se transfère pas à la tâche voisine. |
| Raisonnement affiché | Le raisonnement qu’affiche un modèle ne reflète pas fidèlement ce qui a déterminé sa réponse : dans une étude d’Anthropic, les modèles testés ne signalaient un indice qu’ils avaient utilisé que dans 25 à 39 % des cas. Chen et al., 2025 ↗ | Une justification convaincante ne prouve pas que la réponse est fondée. |
| Injection de consignes | Le modèle ne sépare pas de façon fiable les instructions de l’utilisateur et le texte qu’il lit : une page web, un courriel ou un PDF peuvent contenir des consignes cachées. OWASP, LLM01:2025 ↗ | Le risque augmente dès que l’outil peut envoyer, modifier ou supprimer. |
| Variabilité | La génération est probabiliste et sensible à la formulation, à l’ordre des documents et à la version du modèle. Ses connaissances s’arrêtent à une date de coupure, sauf s’il peut consulter des sources en direct. | Tester plusieurs fois, dater les essais et consigner la version utilisée. |