The Extra 2.8 Points in Google's Guided Learning Trial

Das Wichtigste auf einen Blick

  • Richtige Antworten sind nicht dasselbe wie Lernerfolg.
  • Gezielte Lernimpulse, gestufte Hinweise, Übungen zum Wissensabruf und die Möglichkeit, Fachleute hinzuzuziehen, ergeben ein überprüfbares didaktisches Konzept.
  • Mit gleichwertigen Tests und zeitversetzten Prüfungen ohne Hilfe lässt sich unmittelbare Leistung von dauerhaft verfügbarem Können unterscheiden.
  • Selbstauskünfte zum Engagement belegen nicht, dass Lernende den Stoff eigenständig beherrschen.
  • Eine kurze Hochschulstudie kann weder Mitarbeiterbindung noch einen ROI für Unternehmen belegen.

Die Studie in Tokio zeigte einen kurzfristigen Punktzuwachs

In seiner Mitteilung vom 3. November 2026 (blog.google) berichtet Google von einer randomisierten Studie mit mehr als 300 Studierenden der Universität Tokio. Alle hatten einen halben Tag Zeit, um mit üblichen Online-Ressourcen Statistik zu lernen. Die Hälfte erhielt zusätzlich Zugang zu Guided Learning. Vom Vor- zum Nachtest stiegen die Ergebnisse mit Guided Learning um 8,1 Prozentpunkte, ohne um 5,3 Prozentpunkte. Der zusätzliche Zuwachs betrug also 2,8 Punkte – nicht 8,1. Die Angaben stammen von Google. Die Mitteilung nennt weder Konfidenzintervalle noch Ergebnisse späterer Tests zum Wissenserhalt.

Es lohnt sich, gezielte Lernbegleitung zu testen

Diese randomisierte Studie zu KI-Tutoren untersuchte den Zugang zum Gesamtangebot, nicht einzelne Funktionen der Lernbegleitung. Deshalb lässt sich daraus nicht ableiten, welchen Anteil Hinweise, Quizfragen oder das Lernverhalten am Ergebnis hatten. In einer separaten randomisierten Mathematikstudie (doi.org) führte eine KI, die vor allem Antworten lieferte, zu besseren Ergebnissen beim Üben mit Unterstützung. Bei anschließenden Aufgaben ohne Hilfe verschlechterte sie jedoch die Leistung. Von Lehrkräften entwickelte Hinweise milderten diesen Nachteil ab. Ein positiver Lernzuwachs ohne Hilfe war damit aber nicht nachgewiesen. Für die didaktische Gestaltung folgt daraus vor allem Vorsicht – kein pauschales Versprechen, dass KI-gestützte Lernbegleitung funktioniert.

Ein fünfminütiges Modul braucht einen didaktischen Ablauf

Der IES-Praxisleitfaden (ies.ed.gov) empfiehlt Quizfragen zum aktiven Wissensabruf und Fragen, die zum Erklären auffordern, als Lernstrategien. Für App-Learning legen diese Prinzipien nahe, KI-gestützte Lernbegleitung in ein Modul einzubetten, statt dafür einen separaten Chat vorzusehen. Eine mögliche fünfminütige Lerneinheit zum Kunden-Onboarding könnte so ablaufen.

  1. Stelle eine freigegebene Regel und einen fiktiven Fall vor. Die Lernenden müssen zunächst eine Entscheidung treffen.
  2. Gib nach einem Versuch gezielte Lernimpulse und gestufte Hinweise, ohne die Entscheidung vorwegzunehmen.
  3. Nutze Übungsfragen und führe bei Fehlern zu passenden Lernschritten, die das konkrete Missverständnis aufgreifen.
  4. Ermögliche bei Unklarheiten die Rückfrage bei Fachleuten. Prüfe anschließend mit einem neuen Fall, was ohne Tutor gelingt.

Die Lernhilfen sollten die Verantwortung wieder an die Beschäftigten zurückgeben. Freigegebenes, versioniertes Quellenmaterial, Zugriffskontrollen und überprüfbare Tutor-Protokolle gehören in die Planung des Pilotprojekts. Fiktive Fälle sorgen dafür, dass keine echten Kundendaten in der Übung verwendet werden.

Lernwege mit direkten Antworten und mit strukturierten Hilfen über einem Diagramm, das Testzuwächse von 5,3 und 8,1 Prozentpunkten vergleicht.
Guided Learning lag 2,8 Punkte vorn. Für die Gestaltung zählt strukturierte Lernhilfe, nicht einfach ein zusätzlicher Chat.

Das Pilotprojekt im Unternehmen braucht Tests ohne Tutor

In einem kontrollierten Pilotprojekt könnten Beschäftigte zunächst nach Rolle und Ausgangskenntnissen gruppiert werden. Innerhalb dieser Gruppen würde per Zufall festgelegt, wer mit und wer ohne Tutor lernt. Beide Versuchsgruppen erhielten dieselben freigegebenen Inhalte, gleich viel Lernzeit und gleichwertige Vor- und Nachtests. Nur eine Gruppe hätte Zugang zum Tutor. Zu den wichtigsten Messgrößen für den Lernerfolg mit KI-Tutoren sollten die Ergebnisse eines zeitversetzten Tests ohne Hilfe gehören. Dafür schlagen wir hier zwei bis vier Wochen Abstand vor. Verwendet würden unbekannte, aber gleichwertige Fälle. Stichprobengröße, relevante Verbesserung und Abbruchregeln sollten vor dem Start festgelegt werden.

Microlearning-Tests sollten unterscheiden, was beim Üben mit Unterstützung gelingt, was unmittelbar danach ohne Hilfe klappt und was mit zeitlichem Abstand noch beherrscht wird. Engagement und wahrgenommener Nutzen gehören auf ein separates Dashboard. Die Auswertung sollte Ausgangswerte, Abbrüche, tatsächliche Lernzeit und die gruppenübergreifende Nutzung von Hilfsmitteln berücksichtigen. Neben dem Effekt sollte auch die Unsicherheit ausgewiesen werden.

Nutzen im Unternehmen braucht Belege aus dem Arbeitsalltag

Laut Googles Beschreibung seines separaten Pilotprojekts im Vereinigten Königreich (blog.google) lieferte der vierwöchige Einsatz an Schulen Rückmeldungen aus Befragungen und Interviews. Das ist nicht dasselbe wie gemessener Lernerfolg. Weder diese Rückmeldungen noch eine kurze Lerneinheit an einer japanischen Universität belegen bessere Compliance-Entscheidungen, langfristige Mitarbeiterbindung oder einen ROI für Unternehmen.

Plane mit App-Learning ein kontrolliertes Pilotprojekt für KI-Tutoren.

Darüber sprechen

Ein breiterer Einsatz setzt Nachweise und einen kontrollierten Betrieb voraus

  • Eine definierte Fähigkeit und eine autorisierte Person, die für die Inhalte verantwortlich ist.
  • Eine Kontrollgruppe und eine festgelegte Erfolgsschwelle für den zeitversetzten Test ohne Hilfe.
  • Überprüfbares Verhalten des Tutors und ein klar geregelter Weg zu Fachleuten.
  • Gemessene Betriebskosten und ein plausibler Zusammenhang mit der Leistung im Arbeitsalltag.

Die zusätzlichen 2,8 Punkte rechtfertigen ein methodisch sauberes Experiment, aber keine flächendeckende Einführung. Maßstab für die Beschaffung sollte das Können sein, das nach dem Ende der Unterstützung bleibt. Wenn Beschäftigte einen neuen Fall nicht allein bewältigen können, hat das System hilfreiche Unterstützung geleistet, aber kein eigenständiges Können nachgewiesen.