ChatGPT-3.5 comme formateur complémentaire améliore la performance en actes dentaires dans un essai randomisé de 187 étudiants à l'Université de Wuhan

L'ecole et l'hopital de stomatologie de l'universite de Wuhan ont reparti aleatoirement 187 etudiants de troisieme annee en dentaire dans une unite de formation pratique d'une semaine, avec une instruction video standard seule (groupe temoin) ou la meme instruction video accompagnee d'un acces a la demande a ChatGPT-3.5 en tant qu'instructeur supplementaire (groupe d'intervention).

Verifier si un acces a la demande a un chatbot d'IA generaliste, associe a une instruction video standard, ameliore la performance procedurale et reduit la charge cognitive, en particulier chez les etudiants ayant une capacite spatiale plus faible.

Les etudiants ont suivi une unite de formation pratique en dentaire d'une semaine avec instruction video standard, le groupe d'intervention beneficiant en plus d'un acces a la demande a ChatGPT-3.5 comme instructeur supplementaire. Les resultats ont ete mesures par une evaluation pratique en double aveugle, des mesures de charge cognitive issues du suivi oculaire (diametre pupillaire) et des auto-evaluations d'auto-efficacite et de motivation.

Le groupe ChatGPT a obtenu un score significativement plus eleve a l'evaluation pratique en double aveugle (moyenne de 73,12 contre 65,54, t=4,569, p<0,001) et a presente une charge cognitive significativement plus faible (mesure moyenne du diametre pupillaire de 0,137 contre 0,312, p<0,001). Les etudiants ayant une faible capacite spatiale en ont le plus beneficie (moyenne de 70,20 contre 55,41, p<0,001), et l'auto-efficacite autodeclaree (p=0,04) comme la motivation d'apprentissage (p=0,02) favorisaient toutes deux le groupe ChatGPT.

L'essai s'est deroule sur une semaine dans une seule universite, en utilisant un chatbot generaliste non specifiquement ajuste plutot qu'un tuteur d'IA concu sur mesure ou valide par l'institution ; l'etude publiee ne rend pas compte de mesures de gouvernance des donnees concernant l'acheminement des donnees des etudiants via un chatbot commercial tiers heberge aux Etats-Unis, et n'evalue aucune composante destinee aux enseignants.