Nicht überraschend, aber sehr relevant: Chinesische Schülerinnen & Schüler, die für die Hausaufgaben intensiv KI nutzen, sind dabei schneller und bekommen (für die Hausaufgaben) bessere Noten. In Prüfungen aber (ohne KI) wird ihre Leistung klar schlechter. https://cepr.org/publications/dp21577
DP21577 The Generative AI Learning Penalty: Evidence from Chinese Secondary Education

Using 30 months of panel data on 26,811 Chinese students in grades 7--12, we study how generative AI affects homework productivity and learning. The data combine monthly closed-book exams, high-school and college entrance exams, and homework scores and completion time across nine subjects. We exploit staggered AI adoption in a difference-in-differences design. AI adoption raises homework scores by 18% and reduces completion time by 30%, but lowers monthly exam scores by 20% within six months. High-stakes entrance-exam scores fall by 18 and 24%, with the full penalty emerging only after about two years. The losses are largest in social science subjects, followed by STEM and languages, and are especially large for junior students, high-achieving students, and boys. The learning losses are concentrated among roughly 80% of AI users whose behavior is consistent with homework outsourcing, as indicated by exceptionally short homework completion time coupled with high homework scores. AI users who maintain similar homework completion time as non-AI users experience small learning losses.

CEPR
@chrisstoecker Ja klar - wenn sie die (Haus-) Aufgabe nur an die KI durchreichen und das Ergebnis zurückgeben, wird die KI benotet, nicht der Schüler. 🤷
@chrisstoecker einfache Lösung: KI auch in Prüfungen zulassen.
@chrisstoecker
Wann wird wohl PISA durch den zeitgemässeren KISA-Test ersetzt?
@chrisstoecker
War schon früher so: wer die Hausaufgaben immer abgeschrieben hat versagte bei der Prüfung.
@chrisstoecker Nicht überraschend, beobachten wir hier schon seit ca. 2 Jahren. Hausaufgaben werden besser, Prüfungen Katastrophe. Nicht nur falsche oder keine Lösungen, sondern völlig abstruses Kraut und Rüben durch totale Hilflosigkeit. Völlig andere Aufgaben oder Lehrformate bei extrem auf Kante genähten Kapazitäten kaum zu realisieren.
@chrisstoecker - erinnert mich an #merz und an das Bildungssystem des heutigen Elite #deutschland ;-)
#tassenimschrank
@chrisstoecker
In Deutschland würde man das lösen, in dem man KI auch in Prüfungen zulässt.
@chrisstoecker Wo war Captain Obvious?
@lankohr @chrisstoecker Ist das nicht offensichtlich

@chrisstoecker Hab mittlerweile auch die Erfahrung in zwei Hochschul-Veranstaltungen gemacht:

Computergestützte Übungen mit Zugriff auf alle Unterlagen und KI = super Ergebnisse. Dann die schriftliche Klausur ohne Zugriff auf Unterlagen oder KI= es hagelt 4 und 5...

Ich geh wieder zurück auf Klausuren und mündliche Prüfungen. Projektarbeiten werden so gut wie alle unter intensiver Verwendung von GPTs "geschrieben".

@chrisstoecker Dann müssen wir die Prüfung abschaffen (die USA machen es ja vor. Sie entfernen Messbojen im Ozean. Keine Probleme mehr)
@chrisstoecker meine Frau hatte zwei Hiwis und hat ihnen für eine Recherche verboten KI zu benutzen, weil sie lernen sollen richtig zu recherchieren. Kommentar Hiwis: "Das ist ja Arbeit!" Die junge Generation ist so Lost!
@powerriegel @chrisstoecker jede junge Generation seit Sokrates war lost.
Nix neues.
@Blahster @chrisstoecker mag sein. Aber dieses Mal übertrifft es alles.
@chrisstoecker
ich kann mich an keine Hausaufgabe erinnern, die benotet wurde. Eventuell ein Referat, aber das muss man dann ja auch erstmal halten und n paar Fragen beantworten, da zeigt sich auch schnell, ob man weiß wovon man redet (oder ob man eben gut improvisieren kann). Aber ansonsten kaum überraschend.
@chrisstoecker in welcher Form KI angewandt wird, wird in der Zusammenfassung nicht erwähnt. KI wird hier wohl gleichgesetzt mit 'Textproduktionsautomat'.
Welche Auswirkungen aber eine KI hätte, die bspw. in der Lage ist in Fremdsprachen Dialoge zu führen und Anwender:innen zu verbessern oder ob es hilfreich wäre, eine KI beim lösen von Aufgaben aktiv eingreifen zu lassen, z.B. in Form von kommentierten Korrekturen, sollte doch die eigentliche Frage sein.

"Schüler die für eine Tischlerlehre mit CNC Fräse ihre Arbeiten erledigten, sind dabei schneller und bekommen bessere Ergebnisse.

In Prüfungen ohne CNC Fräse wird ihre Leistung klar schlechter."

Hätte mich ebenso gewundert.