Über Abschlussquoten hinaus: Trainingsentscheidungen messen

Stellen Sie sich ein Trainings-Dashboard vor, das zeigt, dass fast alle den Kurs abgeschlossen haben. Das ist eine nützliche Information zur Durchführung. Eine Frage bleibt jedoch offen: Können die Lernenden das Gelernte anwenden?

Abschluss und nachgewiesene Fähigkeiten beantworten unterschiedliche Fragen. Behalten Sie die Abschlussberichte dort bei, wo sie sinnvoll sind, und ergänzen Sie sie um Bewertungen, die untersuchen, welche Entscheidungen durch das Training verbessert werden sollen.

Warum der Abschluss zur Standardkennzahl wurde

Ein abgeschlossenes Modul ist ein Beleg für die Teilnahme. Es reicht jedoch nicht als Beleg dafür aus, dass ein Lernender das Gelernte anwenden kann.

Ein Lernender kann einen Wissenstest bestehen und dennoch Schwierigkeiten mit einem ungewohnten Einwand eines Kunden haben. Wählen Sie eine Bewertung, die die gewünschte Fähigkeit prüft, unabhängig davon, welches System sie bereitstellt.

Was uns die Forschung zum aktiven Lernen sagen kann

Die Meta-Analyse von Freeman und Kollegen aus dem Jahr 2014 in PNAS ergab in 225 untersuchten grundständigen MINT-Studien bessere Prüfungsergebnisse und niedrigere Durchfallquoten beim Einsatz aktiven Lernens.

Diese Erkenntnisse belegen nicht die Wirksamkeit eines bestimmten Produkts für betriebliche Weiterbildung. Prüfen Sie Ihre eigene Lernaktivität anhand der beruflichen Fähigkeit, die Sie entwickeln möchten.

Die Lücke zwischen Wissen und Handeln

Ein Eskalationsverfahren zu kennen und es in einer unklaren Situation anzuwenden, sind zwei unterschiedliche Bewertungsaufgaben. Ein sinnvoller Trainingsplan bietet Lernenden Gelegenheit, beides zu üben.

Entscheidungsbasierte Simulationen können Lernende dazu auffordern, zu erläutern, wie sie bei unvollständigen Informationen und konkurrierenden Prioritäten vorgehen würden. In LiveCase können Autoren die KI-Bewertung schriftlicher Antworten und Gespräche mit Figuren anhand ihrer Bewertungskriterien konfigurieren. Die Reaktionsgeschwindigkeit ist standardmäßig kein Maß für die Qualität der Begründung.

Was Sie stattdessen messen sollten

Ziehen Sie die folgenden Messgrößen heran, sofern sie zum Lernziel passen:

• Entscheidungsqualität: Wurde die Empfehlung durch die verfügbaren Belege gestützt?
• Begründung: Hat der Lernende Zielkonflikte und Unsicherheiten erläutert?
• Konsistenz: Kann der Lernende dasselbe Prinzip auch in einem anderen Szenario anwenden?
• Anwendung am Arbeitsplatz: Zeigen spätere Beobachtungen, dass die Fähigkeit bei der Arbeit eingesetzt wird?

Wählen Sie Messgrößen, die eine konkrete Frage beantworten. Ein Simulationsergebnis allein belegt weder eine verbesserte Arbeitsleistung noch einen finanziellen Ertrag.

Vier Schritte vom Nachweis der Teilnahme zum Nachweis der Fähigkeiten

Sie müssen nicht über Nacht Ihren gesamten Trainingskatalog umgestalten. Beginnen Sie mit einem Szenario, bei dem viel auf dem Spiel steht und eine Fehlentscheidung besonders kostspielig wäre.

Schritt 1: Prüfen Sie Ihre aktuellen Kennzahlen. Stellen Sie fest, welche Kennzahlen die Teilnahme beschreiben, welche das Lernen bewerten und welche die Anwendung am Arbeitsplatz untersuchen.

Schritt 2: Wandeln Sie ein Modul in eine entscheidungsbasierte Simulation um. Nutzen Sie ein kostenloses KI-Autorenstudio, um ein Szenario mit hohem Risiko, etwa einen Compliance-Verstoß, eine Verhandlung oder eine Krisensituation, in eine interaktive Simulation umzuwandeln, in der Lernende echte Entscheidungen treffen.

Schritt 3: Legen Sie ein Bewertungsraster für Entscheidungen fest. Entwickeln Sie gemeinsam mit Ihren Fachexperten eine Definition dafür, was in Ihrem Kontext eine gute Entscheidung ausmacht. Es geht nicht um die einzelnen Schritte, sondern um das Denken. Welche Zielkonflikte sollten Lernende abwägen? Welche Informationen sollten sie priorisieren?

Schritt 4: Planen Sie Folgemessungen. Wenn Sie eine Verbesserung belegen möchten, definieren Sie einen Ausgangswert, eine vergleichbare Folgebewertung und relevante Beobachtungen am Arbeitsplatz. Das ist ein Evaluationsplan für Ihr Team, kein automatisch erstellter Plattformbericht.

Abschlussquoten richtig einordnen

Berichten Sie über die Teilnahme zusammen mit Belegen für vorhandene Fähigkeiten. Erläutern Sie, was die einzelnen Kennzahlen zeigen und was weiterhin unklar ist.

Die nötigen Werkzeuge gibt es bereits. Die Frage ist, ob Sie bereit sind, die schwierigere Frage zu stellen.

Nutzen Sie das KI-Studio zur Erstellung von Fallstudien, um einen Trainingsfall zu entwerfen, oder stöbern Sie im Fallstudienkatalog. Prüfen Sie den Fall und die Bewertungskriterien, bevor Sie ihn mit Lernenden einsetzen.

Häufig gestellte Fragen

Was ist an Abschlussquoten bei Trainings problematisch?

Abschlussquoten zeigen, wie viele Lernende eine Aktivität beendet haben. Kombinieren Sie sie mit geeigneten Bewertungen, bevor Sie Schlussfolgerungen über den Lernerfolg oder die Arbeitsleistung ziehen.

Wie messen entscheidungsbasierte Simulationen das Lernen anders?

Eine Simulation kann Lernende auffordern, eine Empfehlung auszusprechen und sie im jeweiligen Kontext zu begründen. In LiveCase kann eine konfigurierte KI-Bewertung schriftliche Antworten und Gespräche mit Figuren bewerten. Was gemessen wird, hängt vom Fall und den zugehörigen Kriterien ab.

Was sagt die Forschung über aktives und passives Lernen?

Die oben angeführte Studie von Freeman befasst sich mit grundständigen MINT-Kursen. Sie stützt aktives Lernen in diesem Kontext, belegt aber keine Ergebnisse für die betriebliche Weiterbildung.

Kann ich ohne Programmierkenntnisse eine Simulation erstellen?

Das KI-Studio zur Erstellung von Fallstudien von LiveCase bietet die Möglichkeit, Inhalte eigenständig zu erstellen. Prüfen und überarbeiten Sie den generierten Fall vor dem Einsatz. Der nötige Aufwand hängt vom Material und vom Lernziel ab.

Wie überzeuge ich die Führungskräfte davon, über die Berichterstattung zu Abschlussquoten hinauszugehen?

Schlagen Sie ein kleines Pilotprojekt mit einem klar definierten Ziel, einem Ausgangswert, Bewertungskriterien und einer späteren Beobachtung vor. Berichten Sie sowohl die Ergebnisse als auch die Grenzen dessen, was sich mit dem Pilotprojekt belegen lässt.

Worin unterscheiden sich Kennzahlen zur Regelkonformität und Kennzahlen zu Fähigkeiten?

Teilnahmekennzahlen beschreiben die Beschäftigung mit der Aktivität. Bewertungskennzahlen untersuchen die Leistung bei einer Aufgabe. Beobachtungen am Arbeitsplatz prüfen die praktische Anwendung. Nutzen Sie jede Kennzahl für die Frage, die sie beantworten kann.