
Die Visualisierung zeigt die Verteilung zwischen angeforderten und gemessenen Notenstufen. Viele Passagen lagen über dem vorgesehenen Niveau:
- Das Tool generierte in mehr als der Hälfte (65 %) der Fälle Text für den Naturwissenschaftsunterricht, der für die angegebene Klassenstufe ungeeignet war.
- In zwei Fächern generierte das Tool in etwa einem Drittel (34 %) der Fälle Text außerhalb der angestrebten Klassenstufe.
Generative KI-Tools werden von Lehrern zunehmend zur Erstellung von Unterrichtsmaterialien eingesetzt, es bleibt jedoch unklar, wie genau der von der KI generierte Text der Klassenstufe entspricht, auf die er abzielen soll. Diese Analyse wurde ausgewertet (n=100) Elementarwissenschaftliche Passagen, die mithilfe standardisierter Eingabeaufforderungen erstellt wurden und bestimmte Notenstufen abfragen, wobei die beabsichtigte Note mit der gemessenen Lesekomplexität unter Verwendung mehrerer aggregierter Lesbarkeitsmetriken verglichen wird.
Details zur Methodik und Diskussion willkommen.
Von sonno2
1 Kommentar
full report here if anyone’s interested: [https://ourdojo.org/publications/magicschool-evaluation](https://ourdojo.org/publications/magicschool-evaluation)