Tradotto dall'originale inglese. Dati e fonti restano invariati. Leggi l'originale in inglese
Hamilton County Schools (Khan Academy Khanmigo)
Scuole del Tennessee sperimentano il tutor di IA Khanmigo di Khan Academy per due anni: piccoli guadagni, uso scarso
In due anni scolastici, 18 scuole medie del Tennessee hanno usato Khan Academy con il tutor di IA Khanmigo in sessioni quotidiane di recupero di matematica, nell’ambito di uno studio randomizzato di economisti indipendenti. I punteggi in matematica sono saliti un po’, più o meno quanto con la pratica su Khan Academy senza IA, e gli autori indicano l’uso scarso: la maggior parte degli studenti parlava raramente con il tutor.
Dati chiave
Copiati esattamente dalle fonti. Copiate qualsiasi dato insieme alla sua citazione.
Il problema
Le scuole faticano a dare agli studenti deboli in matematica l’aiuto individuale che funziona meglio, perché il tutoraggio umano è costoso e difficile da coprire con il personale. Le scuole della contea di Hamilton, in Tennessee, gestivano già blocchi quotidiani di recupero di matematica per gli studenti sotto il livello atteso. La domanda era se un tutor di IA dentro quei blocchi potesse aggiungere apprendimento a basso costo.
Cosa hanno costruito
Gli studenti usavano la pratica di Khan Academy insieme a Khanmigo, un tutor di IA impostato per guidare con domande invece di dare le risposte. Era a un clic mentre gli studenti lavoravano a ogni problema. Le classi di controllo hanno proseguito con le normali lezioni di recupero, che univano pratica guidata dall’insegnante e altro software di matematica senza tutor di IA.
Come ci sono riusciti
Gli economisti Philip Oreopoulos e Nina Low hanno condotto uno studio randomizzato a grappolo. In ciascuna delle 18 scuole medie, una o due delle tre classi sono state assegnate a caso alla versione con IA. I risultati sono stati misurati con il test di riferimento MAP del distretto su cinque trimestri nei due anni scolastici. Il gruppo ha anche analizzato i messaggi in chat del secondo anno per vedere come gli studenti usassero il tutor.
Risultati
L’assegnazione al tutor di IA ha aumentato i punteggi in matematica di 1,3 ranghi percentili nazionali per trimestre (circa da 0,06 a 0,08 deviazioni standard su un anno scolastico). Gli autori dicono che questo somiglia a ciò che dà la pratica su Khan Academy senza IA. Quasi tutti gli studenti (96%) hanno provato Khanmigo, ma lo studente mediano gli ha scritto solo in un terzo dei giorni di pratica e nel 17% delle sessioni in cui sbagliava. Gli studenti assegnati al tutor hanno fatto circa 30 minuti in più di pratica a settimana. Sal Khan, fondatore di Khan Academy, ha detto a Hechinger che i risultati corrispondevano alle osservazioni dell’azienda.
Cosa è andato storto
Il coinvolgimento è stato il punto debole. La maggior parte dei messaggi al tutor erano semplici risposte o clic su suggerimenti, e solo circa un messaggio su sette conteneva una domanda di matematica o un passaggio di ragionamento. Gli autori concludono che far usare agli studenti un tutor di IA conta più che dare loro accesso.
Tutti i dati dichiarati
| Indicatore | Dato | Citazione |
|---|---|---|
| Guadagno in matematica dall’assegnazione a Khan Academy con Khanmigo | 1,3 ranghi percentili nazionali per trimestre1 | |
| Lo stesso guadagno espresso su un anno scolastico | circa da 0,06 a 0,08 deviazioni standard1 | |
| Effetto implicito di un anno intero di partecipazione attiva | 0,14 deviazioni standard1 | |
| Studenti che hanno provato Khanmigo almeno una volta | 96%1 | |
| Quota di giorni di pratica in cui lo studente mediano ha scritto a Khanmigo | un terzo1 | |
| Quota di sessioni di esercizi con un errore in cui lo studente mediano ha scritto a Khanmigo | 17%1 |
Lezioni per il vostro progetto
Misurare l’uso reale, non l’accesso. Quasi tutti gli studenti hanno provato il tutor, ma lo studente tipico gli chiedeva raramente aiuto, quindi contare le licenze avrebbe sovrastimato il valore.
Non contare sul fatto che gli studenti cerchino aiuto. La stessa Khan Academy dice che gli studenti non si impegnavano molto e da allora ha riprogettato lo strumento perché intervenga automaticamente.
Inserire l’IA in un tempo di pratica protetto. Qui funzionava dentro i blocchi quotidiani di recupero già esistenti, che hanno dato agli studenti pratica in più; gli autori ritengono che i guadagni derivino soprattutto da quella pratica.
Confrontare con lo stesso software senza IA. Gli autori hanno rilevato che i guadagni erano pari a quelli che dà da sola la pratica su Khan Academy, quindi conviene testare l’IA rispetto a quella base.
Prevedere aiuto umano dove la posta in gioco è alta. Gli autori osservano che ogni studente impara di più in un anno con il tutoraggio umano, a un costo molto più alto.
Avvertenze
- I risultati provengono da un working paper del NBER di due economisti indipendenti. Non è stato sottoposto a revisione tra pari. Hamilton County Schools e Khan Academy sono indicate come partner, e il paper ringrazia Khan Academy per l’aiuto con la piattaforma e la condivisione dei dati.
- Le fonti non dicono quale modello linguistico alimentasse Khanmigo nello studio, quindi il modello è indicato come non divulgato. Il paper dice solo che Khan Academy ha lanciato Khanmigo nel 2023 dopo un accesso anticipato a GPT-4.
- Hechinger riferisce che la versione testata è uscita nel 2023 e che da allora Khan Academy ne ha cambiato il funzionamento, quindi i risultati potrebbero non valere per il prodotto attuale.
- Il disegno dello studio non può separare il contributo proprio del tutor di IA dalla pratica strutturata. Gli autori dicono che i guadagni derivano soprattutto dalla pratica.
- Il paper dice che Khan Academy ha cambiato il tutor a gennaio 2026, a metà dello studio, in modo che si apra per impostazione predefinita poco dopo il caricamento della pagina.
- L’anno di rilascio è il 2024 perché lo studio è iniziato nell’anno scolastico 2024-25. La pagina del NBER riporta solo una data di pubblicazione di agosto 2026, quindi la sua data come fonte è indicata come 2026-08.
Fonti
- One Click Away: AI Tutoring with Khanmigo in a Two-Year School Experiment
National Bureau of Economic Research (working paper 35620) · 2026-08 · Articolo di ricerca · nber.org
- Students didn't get answers from Khanmigo. They didn't want its questions, either
The Hechinger Report · 2026-09-21 · Notizia · hechingerreport.org
Riassunto con parole nostre a partire dalle fonti sopra indicate. Avete notato un errore? Consultate le rettifiche.