Eine der größten Herausforderungen für guten Unterricht sind die unterschiedlichen Lernvoraussetzungen von SchülerInnen. Sie werden häufig mit dem Schlagwort »Schülerdiversität« beschrieben. Für optimale Lernergebnisse muss diese Diversität berücksichtigt werden – zum Beispiel, indem einzelne SchülerInnen individuell unterstützt werden. Die Metaanalyse »Automated adaptive guidance for K-12 education« (2015) von Gerard, Matuk, McElhany & Linn geht der Frage nach, inwiefern adaptive Lernsoftware einen Beitrag zur individuellen Unterstützung im Unterricht leisten kann.

Einleitung

Möglichst allen SchülerInnen innerhalb der Klasse tiefergehendes Wissen und eingehendes Verständnis von Inhalten zu vermitteln, ist das Idealziel von LehrerInnen. Doch wie soll eine einzelne Lehrkraft häufig mehr als 30 SchülerInnen gleichzeitig und individuell nach ihren Fähigkeiten unterstützen? Dafür müssten SchülerInnen jeweils zur richtigen Zeit den richtigen Impuls bekommen und unmittelbar Rückmeldung auf ihre Antworten erhalten. Diese Rückmeldungen sollten im besten Fall über richtig oder falsch hinausgehen und mit einem Hinweis auf die nächsten Schritte oder Aufgaben verbunden sein. In den meisten Klassenzimmern ist dies kaum umsetzbar. Will man jedoch am Ziel festhalten, SchülerInnen individuell zu unterstützen, muss diese Unterstützung auf andere Weise realisiert werden.

Adaptive Lernsoftware (engl.: automated adaptive guidance) bietet hier eine reale Alternative und Ergänzung zum Lehrerhandeln: Sie bewertet Schülerantworten automatisiert und unterstützt SchülerInnen adaptiv. Bisher wurden die Potenziale derartiger Lernsoftware vorwiegend bei Studierenden untersucht. Die Metaanalyse von Gerard und KollegInnen nimmt ihre Wirksamkeit nun bei SchülerInnen der Sekundarstufe umfassend in den Blick.

Worum geht es in dieser Studie?

Die vorliegende Metaanalyse untersucht zwei unterschiedliche Fragestellungen und enthält zwei verschiedene statistische Analysen. Die erste Fragestellung bezieht sich generell darauf, ob adaptive Lernsoftware einen Mehrwert gegenüber Unterricht ohne adaptive Lernsoftware bietet (24 experimentelle Vergleiche). Die Studien vergleichen die Lernleistungen von SchülerInnen, die mit adaptiver Lernsoftware arbeiten, mit denen von SchülerInnen, die die gleichen Inhalte ohne diese Art von Software lernten – z.B. durch lehrergeführten Unterricht und/oder Arbeitsblätter, durch nicht adaptive Lernsoftware, anhand von Multiple-Choice-Tests oder anhand von offenen Aufgaben.

Die zweite Fragestellung bezieht sich auf die Wirksamkeit spezieller Designelemente (Features) adaptiver Lernsoftware. In den entsprechenden experimentellen Studien werden erweiterte Versionen von adaptiver Lernsoftware, die ein bestimmtes Feature enthalten, verglichen mit einfacheren Versionen, die dieses Feature nicht enthalten (29 Einzelvergleiche).

In beiden Analysen wird zudem der Einfluss verschiedener sogenannter Moderatoren untersucht (siehe Tabelle 1). Grundlage der Metaanalyse sind 53 Vergleiche aus 42 Veröffentlichungen, die zwischen 2000 und 2014 erschienen sind. Über 70 % der Vergleiche stammen aus dem mathematisch-naturwissenschaftlichen Fachbereich, der Rest aus sprachlich-gesellschaftswissenschaftlichen Fächern.

Tabelle 1. Übersicht über die untersuchten Moderatoren.

[table id=25 /]

Was findet diese Studie heraus?

Die Analysen zur ersten Fragestellung ergeben einen signifikanten kleinen Gesamteffekt zugunsten adaptiver Lernsoftware (g = 0.34). Dieser Effekt zeigt sich unabhängig von der Art der Vergleichsbedingung, d.h., ob nicht-adaptive Lernsoftware, Arbeitsblätter ohne Unterstützung oder unterstützende Lehrerinstruktion in der Kontrollgruppe eingesetzt wurden. Von allen getesteten Moderatoren hat nur das unterschiedliche Vorwissen der SchülerInnen einen signifikanten Effekt: Während SchülerInnen mit geringem oder mittlerem Vorwissen von der Unterstützung der Software profitieren, ist dies bei SchülerInnen mit hohem Vorwissen nicht der Fall.

Die Analysen zur zweiten Fragestellung ergeben ebenfalls einen signifikanten kleinen Gesamteffekt – zugunsten der erweiterten adaptiven Lernsoftware (g = 0.27). Das bedeutet, dass die Integration bestimmter Features die Effektivität der Software erhöhen kann. Zu diesen Features gehören inhaltliche Hinweise zur Förderung eines tieferen konzeptuellen Verständnisses oder Hinweise zum selbstregulierten Lernen z.B. zum Monitoring der eigenen Lernaktivität. Versionen, die solche Features beinhalten, sind einfacheren Versionen der Lernsoftware, die lediglich Feedback zur Korrektheit der Schülerantwort anbieten, überlegen. Insbesondere wenn Schülerinnen bei komplexeren Aufgaben – beispielsweise beim Erstellen von Diagrammen oder Concept Maps (siehe Kurzreview 19) – unterstützt wurden, führten Versionen mit Features zu besseren Leistungen. Auch hier zeigte sich, dass ausschließlich SchülerInnen mit geringem oder mittlerem Vorwissen davon profitieren.

Wie bewertet das Clearing House Unterricht diese Studie?

Die Clearing House Unterricht Research Group bewertet die Metaanalyse anhand der folgenden fünf Fragen und orientiert sich dabei an den Abelson-Kriterien (1995):

Wie substanziell sind die Effekte?

Nach der gängigen Kategorisierung nach Cohen (1988) sind die Gesamteffekte beider Analysen als klein einzustufen. Veranschaulicht bedeutet der Effekt von g = 0.34, dass ca. 64 % der SchülerInnen mit adaptiver Lernsoftware eine höhere Lernleistung aufweisen als der Durchschnitt der VergleichsschülerInnen.

Dabei ist zu berücksichtigen, dass diese Effekte unter strengen Bedingungen erzielt werden. Zum einen bezieht sich der Effekt immer auf den Mehrwert der adaptiven Software (Fragestellung 1) oder erweiterter Versionen (Fragestellung 2) im Vergleich zu ähnlichen Angeboten. Das heißt, auch in der Vergleichsbedingung erhalten SchülerInnen Aufgaben zur Förderung ihres Verständnisses bzw. einfachere Formen der Unterstützung. Zum anderen erfassen die meisten Studien den tatsächlichen Lernfortschritt der SchülerInnen indem sie den Lernstand nach der Intervention mit dem Lernstand vor der Intervention vergleichen (Prä-Post-Studien). Wie die Moderatoranalysen im Hinblick auf das Vorwissen und die Komplexität der Aufgaben gezeigt haben, können die Effekte adaptiver Software unter bestimmten Bedingungen noch größer ausfallen.

Wie differenziert sind die Ergebnisse dargestellt?

Die Effekte werden differenziert nach Fachbereichen (Mathematik, Naturwissenschaften, Sprachen) und nach Altersstufen (6.-8. Klasse und 9.-12. Klasse) dargestellt. Auch um die Lernleistung zu ermitteln, werden unterschiedliche Maße herangezogen: Unterschieden wird, ob Schülerlnnen korrekt aus verschiedenen Optionen auswählen können (Selektionsaufgaben), ob sie selbst korrekte Problemlösungen durchführen oder eigene Antworten mit korrektem Aufbau erstellen können (generative Aufgaben). Für keine dieser Differenzierungen ergeben sich bedeutsame Unterschiede. 

Wie verallgemeinerbar sind die Befunde?

In beiden Analysen zeigt sich, dass sich die Effektstärken der verschiedenen Studien durchaus unterscheiden. Jedoch zeigen die meisten Moderatoren, die als Erklärung für diese Unterschiede getestet werden, keine signifikanten Effekte (Ausnahme: Vorwissen). Auch wenn dies auf den ersten Blick für eine hohe Generalisierbarkeit spricht, stehen den einzelnen Moderatorentests jeweils nur eine geringe Anzahl an Studien zur Verfügung. Aufgrund der wenigen Einzelvergleiche sind diese Ergebnisse als vorläufig zu sehen und nur eingeschränkt belastbar, da neue Studien diese Trends verändern könnten.

Zukünftige Forschung sollte dementsprechend den Einfluss von Moderatorvariablen weiter prüfen, um belastbarere Ergebnisse in Bezug auf den Einfluss der hier getesteten und gegebenenfalls auch weiterer Moderatorvariablen zu generieren: So ist z.B. auch denkbar, dass sich die Effekte unterscheiden – je nachdem, in welcher Weise die Lernsoftware in den Unterricht eingebettet wird, in welchem kulturellen Kontext die Studie durchgeführt wurde und ob dabei längerfristig Unterschiede gemessen wurden (nachhaltiges Lernen).

Was macht die Metaanalyse wissenschaftlich relevant?

Wissenschaftlich bedeutsam ist diese Metaanalyse, da sie eine spezielle Form der Lernsoftware erstmals exklusiv bei SchülerInnen der Sekundarstufe untersucht. Sie kombiniert dabei Analysen, die einerseits den Mehrwert adaptiver Lernsoftware gegenüber Unterricht ohne solche Software ermitteln, mit Analysen, die die Effektivität bestimmter Erweiterungen der Lernsoftware bestimmen. Dies lässt differenzierte Aussagen zum Forschungsstand und zu weiterführenden Forschungsfragen zu.

Wie methodisch verlässlich sind die Befunde?

Die Transparenz und Begründung des methodischen Vorgehens entspricht teilweise den Kriterien gängiger Anforderungskataloge (z.B. APA Meta-Analysis Reporting Standards). Zwar erfüllen die Angaben zur Suche und Analyse der Primärstudien weitgehend alle Ansprüche, jedoch fehlen Informationen, die die Auswahl und vor allem die genaue Kodierung der Primärstudien betreffen. Genauere Informationen zur Beurteilung des methodischen Vorgehens finden Sie in unserem Rating Sheet.

Fazit für die Unterrichtspraxis

SchülerInnen der Sekundarstufe unterscheiden sich in vielfältiger Weise voneinander und benötigen deshalb auch unterschiedliche Unterstützung, um gute Lernergebnisse zu erzielen. Optimale individualisierte Unterstützung können Lehrkräfte im täglichen Unterricht kaum leisten. Die vorliegende Metaanalyse – deren Studien alle im Schulkontext durchgeführt wurden – zeigt, dass adaptive Lernsoftware diese Funktion effektiv übernehmen und Lehrkräfte bei ihrer Arbeit entlasten kann. Gerade SchülerInnen mit geringem Vorwissen, die mehr Unterstützung brauchen, können von adaptiver Lernsoftware profitieren. Zudem zahlt sich der Einsatz solcher Software vor allem bei komplexeren Aufgaben aus; sie fördern das tiefere Verständnis von Sachverhalten besonders.

Ob nun die Unterstützung von der Lehrkraft oder von der Software kommt, muss kein »entweder-oder« sein. Vielmehr erhält die Lehrkraft durch die Software mehr Freiraum, um sich um einzelne SchüIerInnen kümmern zu können, während die MitschülerInnen parallel weiterarbeiten können.

Studienbeispiel

Einen besonders großen Effekt (d = 1.43) erzielt die adaptive Lernsoftware »Betty’s Brain« in der Studie von Leelawong & Biswas (2008). Die Software verfolgt den Ansatz, dass SchülerInnen durch Lehren lernen. Für die Studie hatten SchülerInnen die Aufgabe, der Cartoonfigur »Betty« mithilfe von Concept Maps grundlegende Zusammenhänge über das Ökosystem von Flüssen beizubringen. Für die Concept Maps müssen die SchülerInnen eigenständig notwendige Informationen über ökologische Zusammenhänge recherchieren.

Wenn sie danach ihre Ergebnisse in eine Concept Map übersetzen, gibt die Software dazu inhaltliche Rückmeldungen. Um sicherzustellen, dass Betty (und dadurch auch sie selbst) die Zusammenhänge richtig verstanden hat, müssen die SchülerInnen Betty regelmäßig testen. Wenn sich Betty schlecht vorbereitet fühlt oder im Test schlecht abschneidet, gibt sie klare Tipps, wie man sie besser unterstützen kann und fordert diese Unterstützung lautstark ein (Impulse zum Self-Monitoring).

In der Studie arbeiteten 15 SchülerInnen der fünften Jahrgangsstufe fünf Unterrichtsstunden lang mit dieser erweiterten Version adaptiver Lernsoftware. Es zeigten sich große Zuwächse im Wissen der SchülerInnen, die dieses Wissen und erworbene Strategien des Self-Monitorings auch auf neue Problemstellungen übertragen konnten. SchülerInnen zweier Kontrollgruppen, die ohne Self-Monitoring-Elemente arbeiteten bzw. nicht in der Rolle der Lehrenden waren, verzeichneten zwar ebenfalls Lernzuwächse – jedoch in geringerem Umfang. Insgesamt demonstriert die kleine Studie die Effektivität von adaptiver Lernsoftware und liefert Hinweise auf effektive Features wie den »Lernen durch Lehren« Ansatz und erweiterte Features anhand des Self-Monitorings.

Referenzen und Links

Podcast

Downloads