EduIA

Veille sur l’IA en contexte éducatif

ChatGPT améliore-t-il l’apprentissage étudiant ? Une méta-analyse des études expérimentales

, , , ,

Source

Deng, R., Jiang, M., Yu, X., Lu, Y., & Liu, S. (2024). Does ChatGPT enhance student learning? A systematic review and meta-analysis of experimental studies. Computers & Education, 227, 105224. https://doi.org/10.1016/j.compedu.2024.105224

Repéré via : Dave Anctil via Faculté des arts et des sciences – Université de Montréal

Résumé

Cette méta-analyse, basée sur 69 études expérimentales publiées entre 2022 et 2024, explore l’impact de ChatGPT sur l’apprentissage étudiant. Les résultats montrent un effet globalement positif, avec des améliorations en performance académique, motivation et pensée critique. Toutefois, l’outil n’a pas eu d’effet significatif sur l’auto-efficacité et a réduit l’effort mental requis pour certaines tâches. De plus, des limites méthodologiques importantes empêchent d’établir avec certitude un lien de causalité.

Points clés

  • Amélioration de la performance académique : Effet positif significatif (g+ = 0,712, p < 0,001), avec 44 des 51 études rapportant des gains.
  • Engagement et motivation renforcés : Effet positif notable sur la motivation (g+ = 0,881, p < 0,001), encourageant une implication plus active.
  • Développement de la pensée critique : ChatGPT favorise la résolution de problèmes et la réflexion avancée (g+ = 0,703, p < 0,001).
  • Aucune amélioration de l’auto-efficacité : Pas d’impact significatif sur la perception des propres capacités d’apprentissage (g+ = 0,441, p = 0,137).
  • Réduction de l’effort mental : ChatGPT diminue la charge cognitive pour certaines tâches (g+ = -0,675, p = 0,026), ce qui peut poser des défis en termes d’autonomie.

Limites méthodologiques

  • Absence d’études longitudinales : La plupart des recherches collectent des données à un instant donné sans suivi à long terme.
  • Échantillons restreints : La généralisation des résultats est limitée par le nombre réduit de participants dans plusieurs études.
  • Manque de rigueur expérimentale : Peu d’études utilisent des protocoles permettant d’isoler clairement l’effet de ChatGPT.
  • Biais lié aux profils étudiants : Les résultats positifs pourraient être influencés par les caractéristiques des participants plutôt que par l’usage de l’IA.
  • Problèmes d’évaluation : Certaines études autorisent l’usage de ChatGPT pendant les tests, rendant difficile la distinction entre l’apprentissage réel et la qualité des réponses de l’IA.

Valeur ajoutée pour l’éducation

Cette étude met en évidence les opportunités et défis liés à l’intégration de ChatGPT en éducation. Si son potentiel d’amélioration de la performance et de la motivation est indéniable, les limites méthodologiques et l’effet sur l’effort cognitif soulèvent des questions. Une approche pédagogique réfléchie et des évaluations mieux adaptées sont nécessaires pour exploiter pleinement son potentiel tout en minimisant ses risques.

Articles liés