Les recherches d'Anthropic ont révélé que les utilisateurs interagissent avec l'IA de manière itérative, mais questionnent moins les résultats lors de la programmation.

Investing.com - Une étude publiée lundi par Anthropic montre que les utilisateurs qui itèrent à plusieurs reprises avec leur assistant AI Claude adoptent un comportement plus compétent, dépassant de plus de deux fois ceux qui se contentent de la réponse initiale. Cependant, lorsque l’outil génère du code ou de la documentation, la critique des utilisateurs diminue.

Cette société d’intelligence artificielle a analysé 9 830 conversations anonymes sur Claude.ai durant une période de sept jours en janvier 2026, en utilisant son cadre de compétence AI 4D. Ce cadre suit 11 comportements observables, notamment l’itération, la vérification des faits et la remise en question du raisonnement. L’étude révèle que 85,7 % des conversations montrent des comportements d’itération et d’amélioration, avec en moyenne 2,67 comportements supplémentaires, contre seulement 1,33 dans les conversations sans itération.

Les conversations impliquant des produits tels que du code, de la documentation ou des outils interactifs représentent 12,3 % de l’échantillon et présentent un taux plus élevé de comportements directive. Dans ces échanges, les utilisateurs sont plus enclins à définir clairement leurs objectifs, à spécifier un format et à fournir des exemples, augmentant respectivement de 14,7, 14,5 et 13,4 points de pourcentage.

De même, ces conversations générant des produits montrent un taux plus faible d’évaluation critique. Par rapport aux conversations sans production, la probabilité que l’utilisateur identifie un manque d’informations contextuelles diminue de 5,2 points de pourcentage, la vérification des faits de 3,7 points, et la remise en question du raisonnement de Claude de 3,1 points.

Anthropic indique que cette étude établit une ligne de base pour suivre l’évolution de la compétence de l’IA dans le temps. La société prévoit de réaliser une analyse de cohorte pour comparer les nouveaux utilisateurs et les utilisateurs expérimentés, ainsi que d’utiliser des méthodes qualitatives pour évaluer les comportements en dehors de l’interface de chat.

Cet article a été traduit avec l’aide de l’intelligence artificielle. Pour plus d’informations, veuillez consulter nos conditions d’utilisation.