Übersetzt aus dem englischen Original. Zahlen und Quellen sind unverändert. Englisches Original lesen
Hamilton County Schools (Khan Academy Khanmigo)
Schulen in Tennessee testen Khan Academys KI-Tutor Khanmigo zwei Jahre lang: kleine Gewinne, dünne Nutzung
Über zwei Schuljahre nutzten 18 Mittelschulen in Tennessee Khan Academy mit dem KI-Tutor Khanmigo in täglichen Förderstunden in Mathematik, im Rahmen einer randomisierten Studie unabhängiger Ökonomen. Die Mathematikleistungen stiegen ein wenig, etwa so stark wie durch Üben auf Khan Academy ohne KI, und die Autoren verweisen auf die dünne Nutzung: Die meisten Schüler sprachen selten mit dem Tutor.
Kennzahlen
Wortgetreu aus den Quellen übernommen. Kopieren Sie jede Zahl mit ihrer Quellenangabe.
Das Problem
Schulen tun sich schwer, leistungsschwachen Mathematikschülern die Einzelförderung zu bieten, die am besten wirkt, denn menschliche Nachhilfe ist teuer und schwer zu besetzen. Die Hamilton County Schools in Tennessee hatten bereits tägliche Förderblöcke in Mathematik für Schüler unterhalb des Klassenniveaus. Die Frage war, ob ein KI-Tutor in diesen Blöcken zu geringen Kosten zusätzlichen Lernerfolg bringen könnte.
Was sie gebaut haben
Die Schüler nutzten Khan-Academy-Übungen zusammen mit Khanmigo, einem KI-Tutor, der darauf angelegt ist, mit Fragen anzuleiten, statt Antworten zu liefern. Er war bei jeder Aufgabe nur einen Klick entfernt. Die Kontrollklassenstufen setzten den üblichen Förderunterricht fort, eine Mischung aus lehrergeführtem Üben und anderer Mathematiksoftware ohne KI-Tutor.
Wie sie vorgegangen sind
Die Ökonomen Philip Oreopoulos und Nina Low führten eine clusterrandomisierte Studie durch. In jeder der 18 Mittelschulen wurden eine oder zwei der drei Klassenstufen zufällig der KI-Version zugewiesen. Die Ergebnisse wurden mit dem MAP-Benchmarktest des Bezirks über fünf Zeitabschnitte in den zwei Schuljahren gemessen. Das Team analysierte außerdem Chatnachrichten aus dem zweiten Jahr, um zu sehen, wie die Schüler den Tutor nutzten.
Ergebnisse
Die Zuteilung zum KI-Tutor steigerte die Mathematikleistungen um 1,3 nationale Perzentilränge pro Zeitabschnitt (etwa 0,06 bis 0,08 Standardabweichungen über ein Schuljahr). Die Autoren sagen, dies gleiche dem, was Üben auf Khan Academy ohne KI bringt. Fast alle Schüler (96 %) probierten Khanmigo aus, doch der mediane Schüler schrieb ihm nur an einem Drittel der Übungstage und in 17 % der Einheiten, in denen er einen Fehler machte. Die Schüler der KI-Gruppe übten pro Woche rund 30 Minuten zusätzlich. Sal Khan, der Gründer von Khan Academy, sagte gegenüber Hechinger, die Ergebnisse deckten sich mit den eigenen Beobachtungen des Unternehmens.
Was schiefgelaufen ist
Die Beteiligung war die Schwachstelle. Die meisten Nachrichten an den Tutor waren bloße Antworten oder Klicks auf vorgeschlagene Eingaben, und nur etwa jede siebte Nachricht enthielt eine Mathematikfrage oder einen Denkschritt. Die Autoren schließen daraus, dass es wichtiger ist, Schüler zur Nutzung eines KI-Tutors zu bewegen, als ihnen Zugang zu geben.
Alle berichteten Zahlen
| Messgröße | Wert | Quellenangabe |
|---|---|---|
| Zugewinn in Mathematik durch die Zuteilung zu Khan Academy mit Khanmigo | 1,3 nationale Perzentilränge pro Zeitabschnitt1 | |
| Derselbe Zugewinn, auf ein Schuljahr umgerechnet | etwa 0,06 bis 0,08 Standardabweichungen1 | |
| Implizierter Effekt eines vollen Jahres aktiver Teilnahme | 0,14 Standardabweichungen1 | |
| Schüler, die Khanmigo mindestens einmal ausprobiert haben | 96 %1 | |
| Anteil der Übungstage, an denen der mediane Schüler Khanmigo schrieb | ein Drittel1 | |
| Anteil der Übungseinheiten mit einem Fehler, in denen der mediane Schüler Khanmigo schrieb | 17 %1 |
Erkenntnisse für Ihr Projekt
Messen Sie die tatsächliche Nutzung, nicht den Zugang. Fast alle Schüler probierten den Tutor aus, doch der typische Schüler bat ihn selten um Hilfe, sodass Lizenzzahlen den Nutzen überzeichnet hätten.
Verlassen Sie sich nicht darauf, dass Schüler von sich aus Hilfe suchen. Khan Academy selbst sagt, die Schüler hätten sich wenig eingebracht, und hat das Tool inzwischen so umgebaut, dass es automatisch eingreift.
Bauen Sie die KI in geschützte Übungszeit ein. Hier lief sie in den bestehenden täglichen Förderblöcken, was den Schülern zusätzliche Übung verschaffte; die Autoren vermuten, dass die Gewinne vor allem daher kamen.
Vergleichen Sie mit derselben Software ohne KI. Die Autoren stellten fest, dass die Gewinne dem entsprachen, was Üben auf Khan Academy allein bringt. Testen Sie KI daher gegen diese Basis.
Planen Sie menschliche Hilfe ein, wo viel auf dem Spiel steht. Die Autoren weisen darauf hin, dass jeder Schüler durch menschliche Nachhilfe in einem Jahr mehr lernt, bei weit höheren Kosten.
Einschränkungen
- Die Ergebnisse stammen aus einem NBER-Arbeitspapier zweier unabhängiger Ökonomen. Es wurde nicht von Fachkollegen begutachtet. Hamilton County Schools und Khan Academy werden als Partner genannt, und das Papier dankt Khan Academy für Hilfe bei der Plattform und die Weitergabe von Daten.
- Die Quellen sagen nicht, welches Sprachmodell Khanmigo in der Studie antrieb, daher wird das Modell als nicht offengelegt angegeben. Das Papier sagt nur, Khan Academy habe Khanmigo 2023 nach frühem Zugang zu GPT-4 gestartet.
- Hechinger berichtet, die getestete Version sei 2023 veröffentlicht worden und Khan Academy habe ihre Funktionsweise seither geändert, sodass die Ergebnisse möglicherweise nicht auf das heutige Produkt zutreffen.
- Das Studiendesign kann den eigenen Beitrag des KI-Tutors nicht vom strukturierten Üben trennen. Die Autoren sagen, die Gewinne stammten vor allem vom Üben.
- Laut dem Papier änderte Khan Academy den Tutor im Januar 2026, mitten in der Studie, sodass er sich standardmäßig kurz nach dem Laden der Seite öffnet.
- Als Einführungsjahr gilt 2024, weil die Studie im Schuljahr 2024-25 begann. Die NBER-Seite nennt nur ein Ausgabedatum von August 2026, daher ist das Quellendatum mit 2026-08 angegeben.
Quellen
- One Click Away: AI Tutoring with Khanmigo in a Two-Year School Experiment
National Bureau of Economic Research (working paper 35620) · 2026-08 · Forschungsarbeit · nber.org
- Students didn't get answers from Khanmigo. They didn't want its questions, either
The Hechinger Report · 2026-09-21 · Nachrichten · hechingerreport.org
In eigenen Worten aus den oben genannten Quellen zusammengefasst. Einen Fehler entdeckt? Siehe Korrekturen.