Was eine Million bearbeitete Aufgaben über gute Aufgaben verraten

Kinder haben in MatheZeit inzwischen über eine Million Aufgaben bearbeitet. Die naheliegende Frage wäre, wie viel geübt wurde. Die interessantere ist eine andere: Was haben wir dabei über Aufgaben gelernt? Hinter jeder MatheZeit-Aufgabe steckt ein didaktisches Modell, eine Annahme darüber, wie Kinder denken und woran sie scheitern. Jede Bearbeitung testet dieses Modell. Eine Million Bearbeitungen sind eine Million kleine Prüfungen unserer eigenen Annahmen, und nicht alle haben wir bestanden.

Zwei Aufgaben, ein Thema, Welten dazwischen

Zwei Knobelbox-Aufgaben behandeln dieselbe Leitidee, das Spiegeln an einer Achse. Bei der einen wählen Kinder das richtige Spiegelbild aus: 89 Prozent gelingen auf Anhieb. Bei der anderen setzen sie den Spiegelpunkt selbst ins Gitter: 43 Prozent, und nirgendwo fordern Kinder häufiger einen Tipp an.

Das Thema erklärt diesen Unterschied nicht, das Format erklärt ihn. Ein Spiegelbild zu erkennen und eine Spiegelung selbst zu konstruieren sind verschiedene kognitive Handlungen, und zwischen ihnen liegt genau der Lernweg, den Unterricht gehen muss. Für uns als Aufgabenmacher steckt darin eine zweite Lektion: Wenn bei einer Aufgabe Fehlquote und Hilfe-Nachfrage gleichzeitig ausreißen, kann das an den Kindern liegen oder an der Aufgabe. Solche Aufgaben wandern bei uns automatisch auf die Prüfliste, denn manchmal ist nicht das Spiegeln schwer, sondern die Darstellung missverständlich.

Fehler sind selten Zufall

Wenn viele Kinder bei Kombinatorik-Aufgaben scheitern, könnte man das für Streuung halten. Die Diagnose zeigt etwas anderes: Das mit Abstand häufigste Muster ist Addieren statt Multiplizieren. Drei Hosen und vier T-Shirts ergeben dann sieben Kombinationen statt zwölf. Dieselbe Handschrift findet sich überall: Bei der schriftlichen Subtraktion ziehen Kinder die kleinere Ziffer von der größeren ab, egal welche oben steht. Beim Spiegeln prüfen sie nur eine Seite der Figur oder vergleichen lokal statt die ganze Form. Bei Wahrscheinlichkeit beurteilen sie „sicher" wie „möglich".

Das sind keine Flüchtigkeitsfehler, sondern stabile, nachvollziehbare Denkmuster, in der Forschung seit Jahrzehnten beschrieben. Deshalb ist in MatheZeit hinter den Aufgaben ein Katalog von 5.178 solcher Fehlvorstellungen modelliert. Eine falsche Antwort wird nicht nur als falsch gewertet, sondern wenn möglich einem Muster zugeordnet. Der Unterschied ist praktisch: Gegen Flüchtigkeitsfehler hilft Wiederholen. Gegen eine Fehlvorstellung hilft Wiederholen nicht, sie produziert denselben Fehler nur zuverlässiger. Es braucht Aufgaben, die das Muster sichtbar machen und auflösen, und genau darauf zielen die Rückmeldungen und die Hinweise von Mazio.

Aus einer Aufgabe werden 17.825

Eine MatheZeit-Aufgabe ist keine einzelne Aufgabe, sondern eine parametrisierte Familie. Zahlenraum, Darstellung, Anordnung und Distraktoren entstehen aus Parametern, innerhalb didaktisch gesetzter Grenzen. Allein in der Knobelbox haben Kinder so in einem halben Jahr 17.825 einzigartige Varianten bearbeitet, der Bewegungs-Aufgabentyp allein existiert in 1.900 Ausprägungen.

Das ist mehr als ein Schutz gegen Abschreiben. Parameter machen Schwierigkeit steuerbar: Dieselbe Aufgabenidee lässt sich im Zwanzigerraum stellen oder im Tausenderraum, mit glatten Zahlen oder mit Übergang, als Bild oder symbolisch. Und sie machen die Aufgabenbank auswertbar, denn wenn eine Variante systematisch aus der Reihe fällt, zeigt der Vergleich mit ihren Geschwistern, woran es liegt.

Wie Adaptivität wirklich entscheidet

Adaptivität klingt oft nach Magie, ist bei MatheZeit aber ein nüchterner Regelkreis. Jeder Aufgabentyp führt eine eigene Schwierigkeitsskala, und die Zuteilung reagiert auf das, was ein Kind zuletzt gezeigt hat. In den Daten lässt sich prüfen, ob das funktioniert: Stärkere Kinder bekommen messbar schwerere Varianten zugeteilt. Die Erfolgsquote bleibt dabei über alle Kinder hinweg ähnlich, und das ist kein Nebeneffekt, sondern der Zweck. Jedes Kind soll in dem Bereich üben, in dem Aufgaben weder trivial noch entmutigend sind.

Wichtig ist, was Adaptivität bei uns nicht heißt: Sie heißt nicht nur leichter oder schwerer. Oft ist die bessere Reaktion auf einen Fehler nicht die leichtere Aufgabe, sondern dieselbe Anforderung in anderer Darstellung, ein isolierter Teilschritt oder ein Kontrastpaar. Warum, steht ausführlich im Artikel Adaptivität beginnt nicht bei „leichter oder schwerer".

Hinweise, die zum Denken führen

Hinweise sind der heikelste Teil einer Lernumgebung. Zu wenig Hilfe frustriert, zu viel Hilfe übernimmt das Denken. MatheZeit arbeitet deshalb mit einer Hinweisleiter: erst die Aufmerksamkeit lenken, dann eine Frage zum Lösungsweg stellen, dann eine Darstellung anbieten, dann eine Strategie aktivieren. Die Lösung selbst gibt es auf keiner Stufe; der letzte Schritt bleibt beim Kind.

Ob diese Leiter trägt, lässt sich in den Versuchs-Sequenzen prüfen, denn zu jedem Versuch ist protokolliert, ob vorher ein Hinweis stand. Das Ergebnis ist deutlich: Nach dem ersten Fehlversuch gelingt der nächste Versuch mit Hinweis in 65 Prozent der Fälle, ohne Hinweis in 46 Prozent. Auch typbereinigt bleiben rund 14 Prozentpunkte Unterschied, und selbst tief in der Leiter, ab dem fünften Versuch, liegen Versuche mit Hinweis noch vorn.

Der interessanteste Teil ist der Mechanismus. Ohne Hinweis kommt die nächste Antwort nach einem Fehler im Median nach 4 Sekunden, das ist Durchprobieren. Mit Hinweis vergehen 21 Sekunden. Der Hinweis verändert also nicht nur, was ein Kind weiß, sondern wie es arbeitet: Er unterbricht das Raten und erzeugt Denkzeit.

In den MatheZeiten ist die Hilfe anders gebaut. Dort meldet sich Mazio nach jedem Fehler von selbst, mit einer Nachricht, die für genau diese Teilaufgabe didaktisch verfasst wurde. Über 112.000 solcher Fehler-und-Retry-Momente zeigen dreierlei. Nach der ersten Nachricht gelingt gut die Hälfte der nächsten Versuche. Ob die Nachricht wirkt, hängt aber daran, ob sie gelesen wird: Kinder, die innerhalb von 30 Sekunden erneut antworten, kommen auf 38 Prozent, wer sich mehr Zeit nimmt, auf 53 Prozent. Viele Kinder antworten schneller, als sie lesen können, und daraus folgt eine konkrete Produktidee, die wir testen werden: eine kurze Pause vor der nächsten Eingabe. Und drittens streuen die Nachrichten enorm. Bei der besten Teilaufgabe führt die Hilfe in 92 Prozent der Fälle zur Lösung, bei der schwächsten in 8 Prozent. Am unteren Ende stehen auffällig oft Wahrscheinlichkeits-Levels, dort, wo die Fehlvorstellung „sicher heißt möglich" sitzt; tief verankerte Muster löst keine Textnachricht. Solche Levels wandern direkt auf die Überarbeitungsliste, denn wo eine Hilfenachricht fast niemanden erreicht, liegt das Problem nicht beim Kind.

Ehrlich dazu: Das sind Beobachtungsdaten, keine Zufallszuteilung. Welche Hinweis-Art wann am besten wirkt, eine Teilfrage, ein Gegenbeispiel oder eine Visualisierung, können wir noch nicht trennen; dafür instrumentieren wir die Leiter gerade feiner.

Aufgaben sind nie fertig

Von außen wirkt eine Aufgabe fertig, sobald sie online ist. Tatsächlich beginnt dort ihre zweite Entwicklungsphase. Jeder Aufgabentyp führt bei uns eine Akte: gemeldete Probleme, Änderungs-Log, Qualitätswerte aus den Prozessdaten. Fällt eine Aufgabe durch die Daten-Triage auf, wird formuliert, ersetzt, neu parametrisiert oder die Schwierigkeitsstufe neu gesetzt, und die nächste Bearbeitungswelle zeigt, ob die Änderung getragen hat.

Das ist der eigentliche Unterschied zu einem gedruckten Schulbuch. Dessen Aufgaben sind so gut wie am Tag der Drucklegung. Eine Aufgabenbank mit einer Million Bearbeitungen dahinter wird jede Woche ein Stück besser, weil sie von jeder einzelnen Bearbeitung etwas über sich selbst erfährt.