Tradotto dall'originale inglese. Dati e fonti restano invariati. Leggi l'originale in inglese
Edo State secondary schools (World Bank evaluation)
Stato di Edo, Nigeria: il tutoraggio doposcuola con Copilot migliora i voti di inglese in una sperimentazione
Nove scuole secondarie pubbliche di Benin City, nello Stato di Edo, hanno realizzato un programma di inglese doposcuola di sei settimane in cui gli studenti lavoravano con Microsoft Copilot sotto la guida degli insegnanti. Una sperimentazione randomizzata della Banca Mondiale riporta che gli studenti hanno ottenuto in totale 0,31 deviazioni standard in più, a circa 48 dollari per alunno.
Dati chiave
Copiati esattamente dalle fonti. Copiate qualsiasi dato insieme alla sua citazione.
0,31
deviazioni standard
Aumento del punteggio totale nel test di fine programma per gli studenti selezionati rispetto al gruppo di controllo (inglese, competenze digitali, competenze sull'IA)1
0,238
deviazioni standard
Aumento del punteggio di inglese, l'esito principale, per gli studenti selezionati rispetto al gruppo di controllo1
0,21
deviazioni standard
Aumento nell'esame ordinario di inglese del terzo periodo, che copriva i contenuti dell'intero anno1
72%
Frequenza media degli studenti assegnati al programma1
Cosa è servito
Il problema
La Nigeria, come buona parte dell'Africa subsahariana, deve fare i conti con la carenza di insegnanti e con scarsi risultati di apprendimento nella scuola secondaria. Si sa che il tutoraggio individuale aiuta gli studenti, ma pochi sistemi scolastici possono permetterselo su larga scala. Il team della Banca Mondiale si è chiesto se un chatbot di IA gratuito e generalista potesse fare da tutor in un contesto con poche risorse.
Cosa hanno costruito
Un programma di inglese doposcuola per studenti del primo anno di scuola secondaria superiore, tipicamente di circa 15 anni, in nove scuole pubbliche di Benin City, nello Stato di Edo. Gli studenti si riunivano nelle aule di informatica delle scuole e usavano Microsoft Copilot, che all'epoca era basato su GPT-4, come tutor virtuale per il programma nazionale di inglese.
Come ci sono riusciti
Il programma si è svolto da giugno a luglio 2024 e offriva fino a due sessioni da 90 minuti a settimana, dodici in tutto, con circa 30 studenti per sessione. Gli studenti lavoravano in coppia su computer condivisi. Ogni sessione iniziava con un prompt fornito dall'insegnante e legato a un argomento del normale corso di inglese, seguito da un'interazione libera con Copilot mentre gli insegnanti si muovevano per l'aula.
Gli insegnanti non facevano lezione direttamente. Hanno seguito una formazione di tre giorni e hanno ricevuto un kit con risorse didattiche, un manuale di alfabetizzazione sull'IA e guide alle sessioni con prompt suggeriti. I prompt erano scritti in modo che il chatbot agisse da tutor capace di adattarsi allo studente, con nomi ed esempi locali. Dei supervisori rilevavano in ogni scuola la frequenza e la qualità delle sessioni.
Gli studenti sono stati scelti a caso tra i volontari, il che ha permesso una sperimentazione controllata randomizzata con un gruppo di controllo.
Risultati
Gli studenti selezionati per il programma hanno ottenuto nel test finale 0,31 deviazioni standard in più rispetto al gruppo di controllo, con l'inglese in aumento di 0,238 deviazioni standard. Sono andati meglio anche nell'esame ordinario di inglese del terzo periodo, che copriva l'intero anno (0,21 deviazioni standard). I miglioramenti sono stati maggiori per le ragazze e per gli studenti con risultati precedenti più solidi, e ogni giorno di frequenza in più rafforzava l'effetto. La frequenza media è stata del 72%.
Gli autori stimano il costo del pilota in circa 48 dollari per alunno. Modellizzano inoltre il miglioramento in inglese come equivalente a 1,5 anni di scuola tipici in Nigeria, il che è una stima e non un risultato misurato.
Tutti i dati dichiarati
| Indicatore | Dato | Citazione |
|---|---|---|
| Aumento del punteggio totale nel test di fine programma per gli studenti selezionati rispetto al gruppo di controllo (inglese, competenze digitali, competenze sull'IA) | 0,31 deviazioni standard1 | |
| Aumento del punteggio di inglese, l'esito principale, per gli studenti selezionati rispetto al gruppo di controllo | 0,238 deviazioni standard1 | |
| Aumento nell'esame ordinario di inglese del terzo periodo, che copriva i contenuti dell'intero anno | 0,21 deviazioni standard1 | |
| Frequenza media degli studenti assegnati al programma | 72%1 | |
| Costo per alunno del pilota di sei settimane per 657 studenti | circa 48 dollari1 |
Lezioni per il vostro progetto
Tenere gli insegnanti in aula. In questo programma gli insegnanti fissavano il prompt iniziale di ogni sessione e supervisionavano coppie di studenti, e gli autori leggono il programma nel suo insieme, compresi la guida degli insegnanti e i prompt, come la causa dei risultati.
Scrivere i prompt per il tutoraggio, non per le risposte. Le guide delle sessioni dicevano a Copilot di comportarsi da tutor e di usare nomi e usanze locali, così faceva domande invece di limitarsi a dare risposte.
Prevedere interruzioni di corrente e di internet. I blackout e la stagione delle piogge hanno disturbato le sessioni, perciò alimentazione e connettività di riserva contano prima di estendere il programma.
Mettere a budget i contenuti. Lo sviluppo dei contenuti ha pesato per il 72% dei costi fissi, quindi un secondo ciclo dovrebbe costare meno per alunno.
Informare gli utenti sui rischi. Insegnanti e studenti sono stati avvisati nella prima sessione su risposte sbagliate, distorsioni ed eccessiva dipendenza.
Avvertenze
- La valutazione è stata condotta da personale della Banca Mondiale che ha anche contribuito a progettare il pilota. Le fonti sono il documento di lavoro e i post del blog della stessa Banca Mondiale, senza conferme esterne.
- Un blog della Banca Mondiale ringrazia il commissario all'Istruzione dello Stato di Edo e il Consiglio per l'istruzione secondaria dello Stato di Edo per la collaborazione al pilota, e gli autori sono personale della Banca Mondiale. Le fonti non dicono chi abbia finanziato o gestito ciascuna parte del programma, quindi il caso è attribuito alle scuole partecipanti dello Stato di Edo e alla valutazione della Banca Mondiale.
- La data di rilascio è l'inizio del programma di sei settimane (da giugno a luglio 2024). La data di pubblicazione è l'aggiornamento di dicembre 2025 del documento di lavoro, pubblicato per la prima volta a maggio 2025.
- Degli studenti assegnati, 657 al programma e 671 al gruppo di controllo, solo 422 e 337 hanno svolto il test finale. La frequenza degli assegnati al programma è stata in media del 72%.
- Il sommario del documento arrotonda l'effetto sull'inglese a 0,23 deviazioni standard e l'introduzione indica 0,24; la sezione sui costi riporta 0,238, che è il valore usato qui. Il blog parla di 800 studenti partecipanti; qui si usano i numeri del documento.
- Le affermazioni di un guadagno equivalente a 1,5-2 anni di scuola e di efficacia in termini di costi sono modellizzazioni degli autori e non sono elencate tra le metriche. È un pilota di sei settimane solo di inglese e gli effetti a lungo termine non sono stati verificati.
- Copilot era uno strumento gratuito descritto all'epoca come basato su GPT-4. Il documento afferma che lo strumento richiedeva solo la registrazione degli studenti.
Fonti
- From Chalkboards to Chatbots: Evaluating the Impact of Generative AI on Learning Outcomes in Nigeria
World Bank Policy Research Working Paper 11125 · 2025-12 · Articolo di ricerca · documents.worldbank.org
- From chalkboards to chatbots: Transforming learning in Nigeria, one prompt at a time
World Bank Blogs (Education for Global Development) · 2025-01-09 · Blog aziendale · blogs.worldbank.org
- From chalkboards to chatbots in Nigeria: 7 lessons to pioneer generative AI for education
World Bank Blogs (Education for Global Development) · 2024-09-18 · Blog aziendale · blogs.worldbank.org
Riassunto con parole nostre a partire dalle fonti sopra indicate. Avete notato un errore? Consultate le rettifiche.