AlexWrites

La Brève IA · N°01

ChatGPT te fait-il perdre l'habitude de chercher ?

· Vidéo de 48 s

Regarder sur YouTubeLa lecture charge le lecteur YouTube, qui peut déposer ses propres cookies. En savoir plus

Les ressources gratuites citées dans la vidéo ↓

Est-ce que ChatGPT te fait perdre l'habitude de chercher par toi-même ? Une équipe de chercheurs a voulu le mesurer, et la version finale de son étude a été présentée début octobre à la Conference on Language Modeling.

L'expérience

L'étude est co-signée par Brian Christian, chercheur au Center for Human-Compatible AI de UC Berkeley, avec des collègues de Carnegie Mellon, du MIT, d'Oxford et de UCLA. Au total, 1 222 personnes ont participé en ligne à une série d'essais contrôlés, surtout des exercices de maths (des fractions) et un test de compréhension écrite.
Le principe est simple. La moitié des participants travaille avec une IA ouverte à côté, qui peut aider ou même donner directement la réponse. L'autre moitié travaille seule. Au bout d'une dizaine de minutes, on retire l'IA au premier groupe et tout le monde continue sans aide.

Ce que ça donne

Une fois privés de l'IA, ceux qui l'avaient utilisée renoncent à une question sur cinq sans même essayer, contre une sur dix pour les autres. Deux fois plus d'abandons, donc. Leurs réponses deviennent aussi moins justes, alors qu'ils avaient un meilleur score tant que l'IA était là.
On retrouve un peu le mécanisme du GPS... quand on l'utilise en permanence, on perd l'habitude de s'orienter par soi-même. Pour les auteurs, l'IA nous habitue à des réponses immédiates et nous prive de l'effort qui fait progresser.

Les limites

L'effet est mesuré juste après une dizaine de minutes d'usage. Sur plusieurs mois, personne ne sait encore, l'étude ne le dit pas. Les tâches restent aussi très scolaires (fractions, lecture), du coup on ne peut pas en tirer de conclusion directe sur le travail au quotidien.

Un indice plutôt que la réponse

Un détail de l'étude est hyper utile en pratique : les participants qui demandaient à l'IA un simple indice, plutôt que la réponse, renonçaient presque trois fois moins souvent. Brian Christian plaide d'ailleurs pour des IA qui se comportent davantage comme un prof particulier, qui guide sans tout faire à ta place.

Sources

  1. Using AI for Just 10 Minutes Erodes Your Ability to Persist at Hard Things (nouvel onglet)

    Research UC Berkeley ·

  2. AI Assistance Reduces Persistence and Hurts Independent Performance (nouvel onglet)

    arXiv (étude complète) ·

Ressources gratuites

Des guides gratuits pour mieux te servir de l'IA

6 agents IA autonomes comparés : lequel choisir pour quel usage

Choisir le bon agent et le mettre en route sans exposer vos données.

Guide illustré (PDF, 20 pages)

Recevoir ce guideToutes les ressources gratuites →
Transcription de la vidéo

Est-ce que ChatGPT te fait perdre l'habitude de chercher par toi-même ? Des chercheurs de Berkeley ont testé ça sur 1200 personnes, avec des exercices de maths. La moitié avait une IA pour les aider. Au bout de dix minutes, on leur retire l'IA. Résultat : une fois privés de l'IA, ceux qui l'avaient utilisée renoncent à une question sur cinq sans même essayer, contre une sur dix pour les autres. Deux fois plus. C'est comme le GPS... quand on l'utilise en permanence, on perd l'habitude de s'orienter par soi-même. Attention, l'effet est mesuré juste après dix minutes. Sur plusieurs mois, personne ne sait encore. En revanche, ceux qui demandaient à l'IA un simple indice, plutôt que la réponse, renonçaient presque trois fois moins souvent. Le bon réflexe : demande un indice à l'IA, puis cherche la suite toi-même.

Pour aller plus loin

Ce site utilise des cookies pour mesurer l'audience, seulement si tu es d'accord. Aucune donnée personnelle n'est revendue. Personnaliser