Übersetzt aus dem englischen Original. Zahlen und Quellen sind unverändert. Englisches Original lesen
Edo State secondary schools (World Bank evaluation)
Bundesstaat Edo, Nigeria: Nachhilfe mit Copilot verbessert in einer Studie die Englischleistungen
Neun staatliche weiterführende Schulen in Benin City im Bundesstaat Edo führten ein sechswöchiges Englischprogramm nach dem Unterricht durch, in dem Schüler unter Anleitung der Lehrkräfte mit Microsoft Copilot arbeiteten. Eine randomisierte Studie der Weltbank berichtet, die Schüler hätten insgesamt 0,31 Standardabweichungen besser abgeschnitten, bei Kosten von rund 48 Dollar pro Schüler.
Kennzahlen
Wortgetreu aus den Quellen übernommen. Kopieren Sie jede Zahl mit ihrer Quellenangabe.
0,31
Standardabweichungen
Zuwachs beim Gesamtergebnis im Abschlusstest für ausgewählte Schüler gegenüber der Kontrollgruppe (Englisch, digitale Kompetenzen, KI-Kompetenzen)1
0,238
Standardabweichungen
Zuwachs beim Englischergebnis, der Hauptzielgröße, für ausgewählte Schüler gegenüber der Kontrollgruppe1
0,21
Standardabweichungen
Zuwachs in der regulären Englischklausur des dritten Trimesters, die den Stoff des ganzen Jahres abdeckte1
72 %
Durchschnittliche Anwesenheit der dem Programm zugewiesenen Schüler1
Was es erforderte
Das Problem
Nigeria hat wie große Teile Afrikas südlich der Sahara mit Lehrermangel und schwachen Lernergebnissen in der Sekundarstufe zu kämpfen. Dass Einzelnachhilfe Schülern hilft, ist bekannt, doch nur wenige Bildungssysteme können sie im großen Maßstab bezahlen. Das Team der Weltbank fragte, ob ein kostenloser, universell einsetzbarer KI-Chatbot in einem ressourcenarmen Umfeld als Tutor dienen kann.
Was sie gebaut haben
Ein Englischprogramm nach dem Unterricht für Schüler im ersten Jahr der oberen Sekundarstufe, in der Regel etwa 15 Jahre alt, an neun staatlichen Schulen in Benin City im Bundesstaat Edo. Die Schüler trafen sich in den Computerräumen der Schulen und nutzten Microsoft Copilot, das damals von GPT-4 angetrieben wurde, als virtuellen Tutor für den nationalen Englischlehrplan.
Wie sie vorgegangen sind
Das Programm lief von Juni bis Juli 2024 und bot bis zu zwei Sitzungen zu je 90 Minuten pro Woche, insgesamt zwölf, mit rund 30 Schülern pro Sitzung. Die Schüler arbeiteten paarweise an gemeinsam genutzten Computern. Jede Sitzung begann mit einem von der Lehrkraft vorgegebenen Prompt zu einem Thema des regulären Englischunterrichts, gefolgt von freier Interaktion mit Copilot, während die Lehrkräfte durch den Raum gingen.
Die Lehrkräfte unterrichteten nicht selbst. Sie absolvierten eine dreitägige Schulung und erhielten ein Toolkit mit Lernmaterialien, einem Handbuch zur KI-Kompetenz und Sitzungsleitfäden mit Prompt-Vorschlägen. Die Prompts waren so geschrieben, dass der Chatbot als Tutor auftrat, der sich an den Schüler anpasst und lokale Namen und Beispiele verwendet. Beobachter erfassten an jeder Schule Anwesenheit und Sitzungsqualität.
Die Schüler wurden per Zufall aus den Freiwilligen ausgewählt, was eine randomisierte kontrollierte Studie mit einer Kontrollgruppe ermöglichte.
Ergebnisse
Die für das Programm ausgewählten Schüler schnitten im Abschlusstest um 0,31 Standardabweichungen besser ab als die Kontrollgruppe, in Englisch um 0,238 Standardabweichungen. Auch in der regulären Englischklausur des dritten Trimesters, die das ganze Jahr abdeckte, schnitten sie besser ab (0,21 Standardabweichungen). Die Zuwächse waren bei Mädchen und bei Schülern mit besseren früheren Leistungen größer, und jeder zusätzlich besuchte Tag verstärkte den Effekt. Die durchschnittliche Anwesenheit lag bei 72 %.
Die Autoren beziffern die Kosten des Pilotprojekts auf rund 48 Dollar pro Schüler. Außerdem modellieren sie den Englischzuwachs als gleichwertig mit 1,5 Jahren typischer Schulbildung in Nigeria; das ist eine Schätzung und kein gemessenes Ergebnis.
Alle berichteten Zahlen
| Messgröße | Wert | Quellenangabe |
|---|---|---|
| Zuwachs beim Gesamtergebnis im Abschlusstest für ausgewählte Schüler gegenüber der Kontrollgruppe (Englisch, digitale Kompetenzen, KI-Kompetenzen) | 0,31 Standardabweichungen1 | |
| Zuwachs beim Englischergebnis, der Hauptzielgröße, für ausgewählte Schüler gegenüber der Kontrollgruppe | 0,238 Standardabweichungen1 | |
| Zuwachs in der regulären Englischklausur des dritten Trimesters, die den Stoff des ganzen Jahres abdeckte | 0,21 Standardabweichungen1 | |
| Durchschnittliche Anwesenheit der dem Programm zugewiesenen Schüler | 72 %1 | |
| Kosten pro Schüler für das sechswöchige Pilotprojekt mit 657 Schülern | rund 48 Dollar1 |
Erkenntnisse für Ihr Projekt
Lassen Sie die Lehrkräfte im Raum. In diesem Programm gaben die Lehrkräfte den Einstiegs-Prompt jeder Sitzung vor und betreuten Schülerpaare; die Autoren führen die Ergebnisse auf das Programm als Ganzes zurück, einschließlich der Anleitung durch die Lehrkräfte und der Prompts.
Schreiben Sie Prompts für Nachhilfe, nicht für fertige Antworten. Die Sitzungsleitfäden wiesen Copilot an, als Tutor aufzutreten und lokale Namen und Gebräuche zu verwenden; so stellte es Fragen, statt nur Antworten zu geben.
Planen Sie Strom- und Internetausfälle ein. Ausfälle und die Regenzeit störten die Sitzungen; Notstrom und eine Ersatzverbindung sind daher vor einer Ausweitung wichtig.
Planen Sie ein Budget für Inhalte ein. Die Inhaltsentwicklung machte 72 % der Fixkosten aus, sodass ein zweiter Durchgang pro Schüler weniger kosten dürfte.
Informieren Sie die Nutzer über Risiken. Lehrkräfte und Schüler wurden in der ersten Sitzung vor falschen Antworten, Verzerrungen und übermäßigem Vertrauen gewarnt.
Einschränkungen
- Die Auswertung stammt von Mitarbeitenden der Weltbank, die auch am Design des Pilotprojekts beteiligt waren. Die Quellen sind das Arbeitspapier und die Blogbeiträge der Weltbank selbst, ohne externe Bestätigung.
- Ein Blogbeitrag der Weltbank dankt dem Bildungsminister des Bundesstaats Edo und der Behörde für Sekundarbildung des Bundesstaats Edo für die Zusammenarbeit beim Pilotprojekt; die Autoren sind Mitarbeitende der Weltbank. Die Quellen sagen nicht, wer welchen Teil des Programms finanziert oder durchgeführt hat; der Fall wird daher den teilnehmenden Schulen im Bundesstaat Edo und der Weltbank-Auswertung zugeordnet.
- Das Einführungsdatum ist der Beginn des sechswöchigen Programms (Juni bis Juli 2024). Das Veröffentlichungsdatum ist die Aktualisierung des Arbeitspapiers vom Dezember 2025, das erstmals im Mai 2025 erschien.
- Von den zugewiesenen Schülern, 657 dem Programm und 671 der Kontrollgruppe, absolvierten nur 422 und 337 den Abschlusstest. Die Anwesenheit der dem Programm zugewiesenen Schüler lag im Durchschnitt bei 72 %.
- Die Zusammenfassung des Papiers rundet den Englischeffekt auf 0,23 Standardabweichungen, die Einleitung nennt 0,24; der Kostenabschnitt gibt 0,238 an, was hier verwendet wird. Der Blog nennt 800 teilnehmende Schüler; hier werden die Zahlen des Papiers verwendet.
- Die Aussagen zu einem Gegenwert von 1,5 bis 2 Schuljahren und zur Kosteneffizienz sind Modellrechnungen der Autoren und werden nicht als Kennzahlen aufgeführt. Es handelt sich um ein sechswöchiges Pilotprojekt nur für Englisch; langfristige Effekte sind nicht untersucht.
- Copilot war ein kostenloses Werkzeug, das damals als von GPT-4 angetrieben beschrieben wurde. Laut Papier war nur die Registrierung der Schüler nötig.
Quellen
- From Chalkboards to Chatbots: Evaluating the Impact of Generative AI on Learning Outcomes in Nigeria
World Bank Policy Research Working Paper 11125 · 2025-12 · Forschungsarbeit · documents.worldbank.org
- From chalkboards to chatbots: Transforming learning in Nigeria, one prompt at a time
World Bank Blogs (Education for Global Development) · 2025-01-09 · Unternehmensblog · blogs.worldbank.org
- From chalkboards to chatbots in Nigeria: 7 lessons to pioneer generative AI for education
World Bank Blogs (Education for Global Development) · 2024-09-18 · Unternehmensblog · blogs.worldbank.org
In eigenen Worten aus den oben genannten Quellen zusammengefasst. Einen Fehler entdeckt? Siehe Korrekturen.