Alle RessourcenPraxisleitfaden

Schulungswirksamkeit: Wissenstest oder Beobachtung?

Der Status „abgeschlossen“ zeigt, dass eine Maßnahme stattgefunden hat. Ein Testergebnis zeigt, wie eine Person einen festgelegten Fragensatz beantwortet hat. Keiner dieser Nachweise belegt automatisch, dass die Person eine Aufgabe unter realen Bedingungen sicher ausführen kann. Die Wirksamkeitsprüfung sollte sich danach richten, was die Schulung verändern sollte und welche Folgen ein Fehler hätte. Sie sollte der Führungskraft außerdem helfen, die Erklärung oder Übung zu wählen, die die beschäftigte Person als Nächstes benötigt.

Autor: Piotr Adamski · Aktualisiert:

Beginnen Sie mit der Wirkung, die Sie tatsächlich beobachten können

„Die Beschäftigten kennen das Verfahren“ ist ein zu breites Lernziel. Schreiben Sie auf, welche Entscheidung oder Handlung nach der Maßnahme zuverlässiger gelingen soll. Bei einer Kennzeichnung könnte es das Erkennen und Sperren einer falschen Materialnummer sein. Bei einer Reinigung könnte es die vollständige Übergabe nach einem Produktwechsel sein. Definieren Sie das Ziel vor der Auswahl des Tests, damit die leicht messbare Teilnahme nicht nachträglich zum einzigen Erfolgskriterium wird. Ein konkretes Ziel gibt der Führungskraft einen beobachtbaren Punkt, den sie anschließend mit der beschäftigten Person besprechen kann.

Die öffentliche Beschreibung von ISO 10015 stellt Kompetenzmanagement und Entwicklung von Menschen in einen gemeinsamen Zusammenhang.[1] Der Kompetenzleitfaden der ISO/IAF Auditing Practices Group beschreibt unter anderem Beobachtung, Gespräch, Test und Ergebnisprüfung als mögliche Zugänge.[2] Er behandelt ISO 9001:2015 und ist keine eigenständige Norm. Der folgende Ablauf ist eine eigene praktische Empfehlung: Wählen Sie die Bewertung danach, welcher Fehler vermieden werden soll und welche Belege für die reale Aufgabe sinnvoll sind. Eine universelle Testform passt dazu selten.

Wissen und Ausführung benötigen unterschiedliche Beobachtungen

Ein Test kann zeigen, ob jemand eine Regel erkennt oder eine Entscheidung in einem beschriebenen Fall treffen kann. Er zeigt nicht automatisch, ob dieselbe Person unter Zeitdruck ein Gerät vorbereitet, einen Prüfwert korrekt erfasst oder eine Übergabe vollständig ausführt. Für solche Tätigkeiten sollte eine passende Beobachtung hinzukommen. Die Beobachtung muss das tatsächliche Ziel betreffen und darf keine unsichere Situation allein zum Zweck der Bewertung erzeugen.

Beschreiben Sie vorher die Bedingungen und das Kriterium. Eine Person soll beispielsweise vor dem Start Identität und Kennzeichnung vergleichen und bei einer Abweichung die festgelegte Sperre anwenden. Beobachten Sie, welche Schritte sie selbstständig ausführt und wo Hilfe nötig ist. Ein sachlicher Vermerk ist besser als die pauschale Aussage „kompetent“. Halten Sie Umfang, Datum und bewertende Person fest. Wird die Tätigkeit später wesentlich verändert, muss geprüft werden, ob die frühere Beobachtung noch denselben Umfang abdeckt.

Fragen sollten plausible Fehlentscheidungen aufdecken

Wählen Sie eine realistische Situation mit Informationen, die für die Entscheidung nötig sind. Eine gute falsche Antwort beschreibt eine tatsächlich denkbare Abkürzung, keine offensichtlich absurde Handlung. So wird sichtbar, ob die Person die Regel verstanden hat. Vermeiden Sie Fallen, komplizierte Verneinungen und Fragen, bei denen allein ein sprachlicher Unterschied entscheidet. Bei mehreren zulässigen Lösungen muss die Bewertung diese anerkennen können.

Prüfen Sie kritische Antworten gesondert. Ein Gesamtwert kann gut aussehen, obwohl die wichtigste Stoppregel falsch beantwortet wurde. Legen Sie deshalb vorab fest, wie mit einem solchen Ergebnis umgegangen wird. Das kann Erklärung, Wiederholung oder praktische Begleitung sein. Die Schwelle ist eine begründete betriebliche Entscheidung, keine von diesem Artikel behauptete allgemeine Pflicht. Analysieren Sie auch die Frage selbst: Wenn viele erfahrene Beschäftigte denselben Punkt falsch beantworten, können unklare Quelle, schlechte Formulierung oder eine widersprüchliche Arbeitsweise die Ursache sein.

Beispiel: Eine Abweichung wird erkannt, aber nicht weitergegeben

Im Beispiel bestehen Beschäftigte den Test zur Materialprüfung. Bei einer späteren Beobachtung erkennen sie eine falsche Kennzeichnung, geben die Information jedoch nur mündlich weiter. Die vorgeschriebene Sperre fehlt. Der Test hat einen Teil des Verständnisses erfasst, aber nicht die vollständige Ausführung. Die Verantwortliche prüft deshalb, ob das Lernmaterial die Übergabe zu wenig behandelt und ob das benötigte Formular am Arbeitsplatz tatsächlich erreichbar ist.

Die Folgemaßnahme besteht aus einer kurzen Szenarioübung und einer Änderung des Zugangs zum Formular. Danach werden einige passende Übergaben erneut beobachtet. Der ursprüngliche Abschluss bleibt dokumentiert, ebenso die erkannte Lücke und ihre Behandlung. Das ist ein Beispiel für Gestaltung und keine nachgewiesene Kundengeschichte. Aus ihm folgt keine allgemeine Fehlerquote. Er zeigt einen Mechanismus: Lernen kann richtig angelegt sein und trotzdem an einer organisatorischen Voraussetzung scheitern. Die Bewertung muss beides auseinanderhalten, statt jede Abweichung auf mangelnde Motivation zu reduzieren.

Kennzahlen brauchen einen fairen Vergleich

Die Abschlussquote zeigt, wie weit die zugewiesene Maßnahme organisatorisch bearbeitet ist. Testergebnisse zeigen Leistung im betrachteten Fragenumfang. Prozessfehler können weitere Hinweise liefern, werden aber auch von Produkten, Anlagenzustand, Besetzung und Prüfintensität beeinflusst. Halten Sie diese Größen getrennt. Eine sinkende Fehlerzahl nach einer Schulung beweist ohne geeigneten Vergleich nicht, dass die Schulung allein die Ursache war. Weniger Aufträge können denselben absoluten Rückgang erklären.

Wenn Sie Vorher und Nachher vergleichen, beschreiben Sie Zeitraum, vergleichbare Aufgaben und den Nenner. Verwenden Sie möglichst eine nachvollziehbare Häufigkeit pro passender Tätigkeit statt bloßer Summen. Bei kleinen Fallzahlen ist eine qualitative Rückmeldung oft ehrlicher als ein scheinbar präziser Prozentwert. Wählen Sie zusätzlich Schutzkriterien, etwa keine unsichere Beschleunigung oder Verlagerung von Fehlern in einen anderen Schritt. Der Zweck ist eine bessere Entscheidung über den Prozess, keine Kennzahl, die unabhängig von ihren Bedingungen gut aussieht.

Bewertungen benötigen einen begrenzten Zugriff

Ergebnisse sind personenbezogen, sobald sie einer Person zugeordnet werden können. Die Grundlagen des Europäischen Datenschutzausschusses erläutern Zweckbindung, Minimierung und begrenzte Aufbewahrung.[3] Sammeln Sie daher nur Angaben, die für Lernbegleitung, Nachweis oder Einsatzentscheidung gebraucht werden. Eine sachliche Beobachtung zur Aufgabe gehört in den passenden Nachweis. Private Vermutungen über Gesundheit, Charakter oder Motivation gehören nicht automatisch dazu.

Bestimmen Sie, wer detaillierte Ergebnisse sieht und wer nur den Handlungsbedarf benötigt. Eine übergeordnete Leitung kann offene Maßnahmen beurteilen, ohne jeden einzelnen Fehlversuch zu lesen. Besprechen Sie Ergebnisse mit den betroffenen Personen so, dass eine Korrektur tatsächlicher Daten möglich bleibt. Ein fehlerhaft zugeordnetes Ergebnis darf nicht dauerhaft eine Einsatzentscheidung beeinflussen. Auch für Exporte und ausgedruckte Listen gelten passende Regeln. Die Datensammlung wird durch ihren Umfang nicht überzeugender; sie wird überzeugender durch klare Aussage und nachvollziehbare Grundlage.

Die Reaktion macht die Bewertung wirksam

Legen Sie für jedes nicht erfüllte Kriterium eine angemessene Reaktion fest. Zusätzliche Erklärung ist sinnvoll, wenn die Regel missverstanden wurde. Praktische Begleitung ist sinnvoll, wenn die Ausführung noch nicht gelingt. Eine technische Änderung ist sinnvoll, wenn das Arbeitsmittel die richtige Handlung verhindert. Wiederholen Sie nicht einfach denselben Kurs, ohne den Grund der Lücke zu prüfen. Sonst erzeugt das System neue Abschlüsse für ein ungelöstes Problem. Halten Sie Beobachtung, Termin und Zuständigkeit zusammen, damit die Leitung die praktische Prüfung ohne Rekonstruktion aus einzelnen Nachrichten vorbereiten kann.

CrewShift kann Lernmaterial, Quellenstand, Zuweisungen, Abschlüsse und Ergebnisse zusammenführen. Die praktische Beobachtung und Freigabe bleiben eine betriebliche Entscheidung. Prüfen Sie nach einem überschaubaren Zeitraum, ob die Folgemaßnahme ihre konkrete Aufgabe erfüllt hat. Dokumentieren Sie die Bewertung auch dann, wenn sie keine Verbesserung zeigt. Ein ehrlicher Befund erlaubt einen anderen Ansatz. Eine ausnahmslos positive Lernstatistik, die mit der beobachteten Arbeit nicht zusammenpasst, erschwert dagegen die Ursachenklärung. Erstellen Sie ein Konto und testen Sie eine Lernmaßnahme: Findet die Führungskraft Ergebnis und Verlauf rechtzeitig für hilfreiche Rückmeldung, ohne eine zusätzliche Liste zusammenzustellen?

Legen Sie die erwartete Wirkung vor der Veröffentlichung der Schulung fest

Ein häufiges Problem beginnt schon vor dem Test. Eine Organisation startet eine Schulung, ohne festzuhalten, woran sie den Erfolg erkennen wird. Der Abschluss wird dann zur einzigen leicht erfassbaren Kennzahl.

Bei einer Informationsänderung kann das Ziel die Kenntnisnahme einer überarbeiteten Regel sein. Bei einem neuen Meldeweg kann es darum gehen, ein Szenario und den Eskalationsweg richtig zu erkennen. Bei einer Produktionstätigkeit kann das Ziel die Ausführung der Aufgabe nach einer Anweisung unter Beobachtung einer berechtigten Person sein. Diese Ziele benötigen unterschiedliche Nachweise.

Stimmen Sie die Methode auf die Anforderung ab

Ein Test kann deklaratives Wissen prüfen: Reihenfolgen, Kriterien, Abbruchbedingungen, Ausnahmen und Eskalationsregeln. Er sollte nicht den Eindruck einer Beobachtung praktischer Arbeit erwecken. Kann ein Fehler einen Materialfehler, einen Sicherheitsvorfall oder eine schwerwiegende Prozessunterbrechung verursachen, kann zusätzlich zum Wissenstest eine praktische Bewertung erforderlich sein. Welche Nachweise sinnvoll sind, hängt davon ab, ob der Empfang einer Information, das Verständnis, eine Entscheidung, die praktische Ausführung oder eine erforderliche formale Berechtigung belegt werden soll.

Kenntnisnahme — um zu zeigen, dass die Person die Änderung erhalten hat; Wissenstest — um das Verständnis festgelegter Regeln zu prüfen; Szenarioübung — um eine Entscheidung unter Ausnahmebedingungen zu prüfen; Aufgabenbeobachtung — um die praktische Ausführung zu bewerten; formale Lizenz oder Berechtigung — wenn Gesetz, Kunde oder interne Regel dies verlangen. Nicht jeder Kurs benötigt die stärkste Kontrolle. Übermäßige Formalisierung erhöht die Kosten und kann das System zu einer bloßen Klickroutine machen. Das Kriterium sollte dem Risiko angemessen sein.

Ein erfolgloses Ergebnis muss eine Maßnahme auslösen

Wenn ein Test wichtig ist, legen Sie Bestehensgrenze und Reaktion auf ein Nichtbestehen vor der Veröffentlichung fest. Ein Ergebnis von 70% ist bedeutungslos, wenn niemand weiß, ob darauf eine erneute Schulung, eine Erläuterung, die Prüfung durch eine Führungskraft oder eine zeitweilige Einschränkung der Aufgabe folgt. Bewahren Sie den ersten Versuch und spätere Wiederholungen auf. Eine Historie „nicht bestanden -> Korrekturmaßnahme -> bestanden“ sagt mehr aus, als alles durch einen abschließenden grünen Status zu ersetzen. Sie zeigt, dass die Kontrolle eine Lücke gefunden und die Organisation darauf reagiert hat. Der Verlauf zeigt, welche Unterstützung die Lücke geschlossen hat, und gibt dem nächsten Entwicklungsgespräch einen Ausgangspunkt jenseits der Endpunktzahl.

Ein Schulungssystem kann Quelle, Version, Zuweisung, Frist, Versuche und Ergebnis dokumentieren. Verlangt die Organisation eine beobachtete Arbeitsleistung oder die Entscheidung einer vorgesetzten Person, sollte dies ein eigenes Kriterium mit einer eigenen verantwortlichen Person bleiben. CrewShift sollte niemanden allein wegen des Abschlusses von Material als kompetent einstufen. Es kann einen Teil des Prüfpfads für die Kompetenzentscheidung liefern: Was wurde wann, anhand welcher Version und mit welchem Ergebnis vermittelt? Verwenden Sie diese Belege für das nächste Gespräch über passende Übung, eine verständlichere Erklärung oder bessere Arbeitsbedingungen, statt nur den Abschluss abzuhaken.

Fragen, die Sie stellen sollten

Ist ein hoher Testwert ein Kompetenznachweis?

Er belegt Leistung im betrachteten Testumfang unter den festgelegten Bedingungen. Für praktische Arbeit kann eine zusätzliche Beobachtung nötig sein. Prüfen Sie besonders kritische Entscheidungen, die ein Gesamtwert verdecken könnte. Eine richtige Antwort zur Reihenfolge beweist nicht automatisch deren zuverlässige Ausführung am Arbeitsplatz. Umfang und Grenze sollten im Nachweis deutlich sein.

Wie viele Fragen sind erforderlich?

Eine allgemeine Zahl wäre ohne Aufgabe und Risiko unbegründet. Wählen Sie Fragen, die wesentliche Entscheidungen abdecken und plausible Fehlannahmen sichtbar machen. Prüfen Sie Verständlichkeit und Quellenbezug. Wenige gute Szenarien können aussagekräftiger sein als viele Fragen zu Überschriften. Praktische Kriterien werden zusätzlich betrachtet, wenn sie durch Antworten allein nicht ausreichend bewertet werden können.

Was geschieht bei wiederholtem Nichtbestehen?

Analysieren Sie die Ursache: unklare Regel, missverständliche Frage, fehlendes Wissen oder organisatorisches Hindernis. Wählen Sie passende Erklärung, Übung oder Prozessmaßnahme und bewerten Sie anschließend das konkrete Kriterium erneut. Derselbe Kurs ohne Ursachenklärung kann neue Abschlüsse erzeugen, während die Lücke bestehen bleibt. Die zulässige Tätigkeit wird bis zur Klärung ausdrücklich entschieden.

Kann eine sinkende Fehlerzahl die Wirksamkeit beweisen?

Sie kann ein Hinweis sein. Prüfen Sie aber vergleichbare Aufgaben, Umfang, Produkte und Prüfbedingungen. Eine geringere absolute Zahl kann auch durch weniger Aufträge entstehen. Bei kleinen Fallzahlen sind konkrete Beobachtungen häufig hilfreicher als genaue Prozentwerte. Dokumentieren Sie die Grenzen des Vergleichs und vermeiden Sie eine unbelegte Zuschreibung der gesamten Veränderung an die Schulung.

Quellen und Geltungsbereich

  1. ISO 10015:2019 — offizielle Beschreibung zu Kompetenzmanagement und Personalentwicklung
  2. ISO/IAF Auditing Practices Group — Guidance on auditing Competence, 2022, zu ISO 9001:2015
  3. Europäischer Datenschutzausschuss — Data protection basics
  4. Aktuelle Norm und Status von ISO 9001 — offizielle ISO-Seite

Dieses Informationsmaterial ersetzt weder lizenzierte Normen noch eine individuelle Rechtsberatung.