Teilnehmer-Feedback automatisch auswerten

Das echte Ausmaß des Problems

Evaluationsbögen sind in der Weiterbildung flächendeckend eingeführt. Fast jeder Bildungsträger nutzt sie, fast alle erhalten sie ausgefüllt zurück. Aber was damit passiert, variiert erheblich:

Numerische Skalen werden fast immer ausgewertet, weil das eine Viertelstunde dauert. Freitextantworten werden dagegen häufig nicht systematisch analysiert, nicht weil die Erkenntnisse unerwünscht wären, sondern weil der Aufwand zu hoch ist. Wie viele Bildungsanbieter ihre Freitexte liegen lassen, hat niemand repräsentativ erhoben. Deinen eigenen Wert findest du in fünf Minuten: Nimm die letzten zehn Kurse und zähl, zu wie vielen es eine schriftliche Auswertung der offenen Fragen gibt.

Das Problem ist quantifizierbar:

• 100 Evaluationsbögen mit je 3–4 offenen Fragen: 300–400 Einzelantworten, von denen viele mehrere Sätze lang sind. Lesen, kategorisieren, priorisieren: 3–5 Stunden.
• Ein Träger mit 50 Kursen zu je 20 bis 25 Teilnehmenden: 1.000 bis 1.250 Bögen im Jahr, bei 3 bis 5 Stunden je 100 Bögen also 30 bis gut 60 Stunden für eine vollständige Auswertung. Das ist knapp eine bis gut anderthalb Vollzeit-Arbeitswochen, reine Verwaltungsarbeit.
• Was fehlt: Trainer erhalten kein qualitatives Feedback. Didaktische Schwächen werden nicht identifiziert. Programmentwicklung basiert auf Zahlen, nicht auf dem, was Teilnehmende in eigenen Worten sagten.

Für Träger mit AZAV-Zulassung gilt außerdem: § 2 Abs. 4 AZAV verlangt ein Qualitätssicherungssystem, durch das die Qualität „kontinuierlich verbessert wird”, samt systematischem Beschwerdemanagement „einschließlich der Berücksichtigung regelmäßiger Befragungen der Teilnehmenden”. Ob dafür auch die offenen Antworten ausgewertet werden müssen, sagt die Verordnung nicht. Wer sie nie liest, kann aber schwer zeigen, dass er die Befragungen berücksichtigt.

Mit vs. ohne KI, ein ehrlicher Vergleich

Richtwerte der Redaktion, nicht gemessen. Die Zeiten gelten je 100 Bögen mit drei bis vier offenen Fragen, ohne das Gegenlesen der Rohdaten (rund 15 Minuten, siehe Einstiegsfehler 2). Ein einzelner Kurs hat meist 15 bis 25 Bögen, nicht 100.

Der qualitative Gewinn ist oft größer als der Zeitgewinn: Trainer, die erstmals systematisches Textfeedback erhalten, berichten von konkreten Erkenntnissen, die numerische Bewertungen nicht liefern, etwa dass das Tempo des Kurses für Einsteiger zu hoch war, obwohl die Gesamtbewertung gut ausfiel.

Einschätzung auf einen Blick

Zeitersparnis, mittel (3/5) Je 100 Bögen sinkt die Auswertung von 3–5 Stunden auf 10–20 Minuten plus eine Viertelstunde Gegenlesen. Ein Kurs hat aber meist 15 bis 25 Bögen, und viele Träger werten die Freitexte heute gar nicht aus. Dann spart die KI keine Zeit, sie macht eine Auswertung möglich, die bisher ausfiel. Deshalb deutlich hinter UC01 (Materialerstellung), das jeden Arbeitstag Zeit spart.

Kosteneinsparung, niedrig (2/5) Die Auswertung von Evaluationsbögen verursacht in den meisten Einrichtungen keine direkten externen Kosten, sie ist interne Verwaltungsarbeit. Einsparungen entstehen als Zeitgewinn, nicht als Budgetreduktion. Wer bisher einen externen Evaluationsdienstleister bezahlt, spart dessen Rechnung, abzüglich der internen Zeit für Prompt und Gegenlesen. Für die Mehrheit der Bildungsträger ist der finanzielle Effekt aber indirekt.

Schnelle Umsetzung, hoch (4/5) Ein erster Test ist in einem Nachmittag möglich, einfach die Textantworten in ChatGPT oder Claude kopieren und auswerten lassen. Der Schritt von diesem ersten Test zu einem strukturierten, wiederholbaren Workflow dauert 2–4 Wochen: Prompt-Entwicklung, Template für den Evaluationsbogen definieren, Output-Format festlegen. Nicht so sofort wie die Materialerstellung, aber deutlich schneller als ein neues Tool einzuführen.

ROI-Sicherheit, hoch (4/5) Wie lange hat die Auswertung früher gedauert? Das lässt sich messen, sofern es sie gab. Wie lange dauert sie jetzt? Das auch. Wo es bisher keine Auswertung gab, misst du den Nutzen daran, ob Trainer aus dem Feedback konkrete Änderungen ableiten. Der Unterschied zu UC01 (dem ROI-Leader): Der Nutzen fällt periodisch an statt täglich, nach Kursabschlüssen, nicht jede Stunde. Messbar und verlässlich, aber mit weniger Sofort-Impact im Alltag.

Skalierbarkeit, hoch (4/5) Mehr Kurse, mehr Teilnehmende, mehr Feedback, die KI-Auswertung skaliert ohne proportionalen Mehraufwand. UC03 (Kursempfehlungen) ist der Skalierungsführer im Branch, weil vollautomatische Empfehlungen ohne jeden Traineraufwand auf Tausende Lernende laufen, hier bleibt noch die regelmäßige Prüfung der Auswertungsergebnisse.

Richtwerte, stark abhängig von Feedbackmenge, Struktur der Evaluationsbögen und gewünschter Auswertungstiefe.

Was das System konkret macht

NLP-gestützte Textanalyse macht folgendes aus einer Sammlung freier Textantworten:

Themen-Clustering: Das System identifiziert, welche Themen wiederholt auftauchen, ohne dass du sie vorab definieren musst. Wenn 23 von 100 Teilnehmenden das Tempo des Kurses kommentieren, findet das die KI. Wenn 15 Personen die praktischen Übungen loben, taucht das als Kategorie auf. Menschen, die manuell lesen, übersehen Muster, die erst durch Aggregation sichtbar werden.

Sentiment-Analyse: Nicht nur was gesagt wird, sondern wie, positiv, negativ, gemischt. Moderne LLMs erkennen auch Nuancen: “Die Materialien waren ausreichend” ist sachlich positiv, aber kein Lob, ein gutes Modell klassifiziert das korrekt als neutral bis leicht kritisch.

Häufigkeitsauswertung: Welche Stichworte, Themen oder Aspekte kommen wie oft vor? Das ergibt eine Prioritätsliste für Verbesserungen, die häufig genannten Kritikpunkte sind die dringlichsten.

Zusammenfassung: Aus 300 Einzelantworten wird eine strukturierte Auswertung mit den wichtigsten Erkenntnissen, nicht nur eine Liste, sondern ein interpretierbarer Report für Trainer und Kursleitung.

Was dabei schiefgehen kann

LLMs können beim Sentiment irren, besonders bei indirekten oder ironischen Formulierungen. “Das war wirklich interessant…” kann Lob oder milde Kritik sein, je nach Kontext. Bei kleinen Feedbackmengen (unter 20 Antworten) sind die statistischen Muster weniger zuverlässig. Und wenn der Evaluationsbogen schlecht formulierte Fragen enthält, liefert auch die KI-Auswertung keine guten Erkenntnisse, Garbage in, garbage out.

Konkrete Werkzeuge, was wann passt

ChatGPT oder Claude , für direkten Einstieg ohne Tool-Einführung. Texte aus den Evaluationsbögen kopieren, Prompt eingeben, Auswertung erhalten. Keine neuen Tools, keine Integration, kein Budget. Der Nachteil: Manuelles Abtippen oder Kopieren der Antworten, keine automatische Verarbeitung, keine Vergleichsdaten über Zeit. Für 2–3 Kurse pro Monat ist das vollkommen ausreichend.

Netigate , für strukturierte Evaluierung mit automatischer Textanalyse. Europäische Feedback-Plattform mit eingebetteter KI-Textanalyse. Die Evaluationsbögen werden digital ausgefüllt, und die Auswertung inklusive Themen-Clustering und Sentiment läuft vollautomatisch. Besonders wertvoll für Bildungsträger mit 500+ Evaluierungen pro Jahr und dem Bedarf, Trainer-Performance über Zeit zu vergleichen. Preise nennt Netigate nur auf Anfrage, und die KI-Textanalyse (Ask AI) steckt laut unserer Toolseite nicht in den Einstiegspaketen, sondern erst in den höheren Tarifen. Frag im Angebot gezielt nach dem Tarif mit Textanalyse, lohnt sich nur bei ausreichend Volumen.

Microsoft Forms + Power Automate + OpenAI-API, für IT-affine Teams mit M365-Umgebung. Digitale Evaluationsbögen in Microsoft Forms, automatische Weiterleitung der Antworten per Power Automate an die OpenAI-API, strukturierter Auswertungsreport in ein SharePoint-Dokument. Ganz ohne Zukauf geht das nicht: Der Aufruf der API läuft über den HTTP-Connector, und der ist ein Premium-Connector. Dafür braucht der Ersteller des Flows Power Automate Premium zusätzlich zu M365, dazu kommen die API-Kosten nach Verbrauch. Erfordert ca. 1–2 Tage Einrichtungsaufwand.

Moodle mit Feedback-Plugin + KI-Export, für Bildungsträger mit Moodle-LMS. Moodle hat ein integriertes Feedback-Modul. Antworten können exportiert und dann per ChatGPT oder Claude ausgewertet werden. Kein Zusatztool nötig, wenn Moodle schon genutzt wird.

Wann welcher Ansatz:

• Unter 200 Evaluierungen pro Jahr, kein Budget: ChatGPT/Claude direkt
• 200–500 Evaluierungen, M365-Umgebung vorhanden: Power Automate-Integration
• 500+ Evaluierungen, systematisches Trainer-Monitoring gewünscht: Netigate

Datenschutz und Datenhaltung

Evaluationsbögen enthalten, je nach Gestaltung, personenbezogene Daten: Wenn Teilnehmende ihren Namen angeben (was bei vielen Trägern optional ist) oder wenn Angaben zur Person (Beruf, Abteilung, Kurs) in Kombination identifizierend sind, greift die DSGVO.

Wichtige Grundsätze:

• Anonyme Evaluierungen: Wenn Bögen für die Teilnehmenden wirklich anonym sind (kein Name, keine identifizierenden Angaben), ist das Risiko auf ihrer Seite gering. Praxis-Hinweis: Viele Bögen sind faktisch nicht anonym, weil die Kombination von Kurs, Datum und Berufsgruppe eine Identifizierung ermöglicht. Und anonym für die Teilnehmenden heißt nicht anonym für die Trainerin: Die Antworten bewerten eine bestimmte Person, die über Kurs und Datum immer erkennbar ist. Für sie sind die Texte personenbezogene Daten, Leistungsdaten sogar.

• Personenbezogene Evaluierungen: Wenn Antworten auf einzelne Personen zurückführbar sind, gelten die üblichen Anforderungen: AVV mit dem KI-Anbieter (Art. 28 DSGVO), Informationspflicht gegenüber Teilnehmenden über die Nutzung von KI-Tools.

• ChatGPT und Claude (Consumer-Versionen): Für personenbezogene Daten nicht geeignet, Eingaben können für Training genutzt werden. ChatGPT Business, Claude Team (beide ab zwei Plätzen), Enterprise-Tarife oder API-Nutzung verwenden.

• Netigate : EU-Datenhostung (Schweden), AVV abschließbar, geeignet für personenbezogene Evaluierungsdaten.

• AZAV-Hinweis: Wenn KI-Tools für die Auswertung von Evaluierungen genutzt werden, die gegenüber der fachkundigen Stelle dokumentiert sind, empfiehlt sich eine kurze Notiz im Qualitätshandbuch über die eingesetzten Werkzeuge und die Datenschutzmaßnahmen.

Was es kostet, realistisch gerechnet

Laufende Toolkosten

• Claude Pro: 20 Euro im Monat, für direkte Nutzung mit Bögen ohne Personenbezug
• ChatGPT Plus: 23 Euro im Monat, dieselbe Einschränkung
• Netigate: nur auf Anfrage, die Textanalyse erst in den höheren Tarifen (nur bei ausreichend Volumen sinnvoll)
• Power Automate Premium: 13 Euro je Nutzer und Monat zzgl. MwSt., nötig für den HTTP-Aufruf der OpenAI-API, dazu API-Kosten nach Verbrauch

Einrichtungsaufwand

• ChatGPT/Claude direkt: 1–2 Stunden Prompt-Entwicklung
• Power Automate-Integration: 1–2 Tage interner Aufwand

Was du dagegenrechnen kannst Ein Bildungsträger mit 40 Kursen pro Jahr und je 25 Teilnehmenden: 1.000 Evaluierungsbögen mit je drei offenen Fragen, also bis zu 3.000 Textantworten. Manuell ausgewertet sind das bei 3 bis 5 Stunden je 100 Bögen 30 bis 50 Stunden im Jahr. Bei einem internen Stundensatz von 30 bis 50 Euro entspricht das 900 bis 2.500 Euro gebundener Personalkapazität.

Die KI-Variante: 40 Kurse mal 10 bis 20 Minuten, plus eine Viertelstunde Gegenlesen je Kurs, zusammen 17 bis 23 Stunden im Jahr. Die Ersparnis liegt also bei 7 bis 33 Stunden, und sie ist Kapazität, kein Geld. Wo die Freitexte bisher gar nicht gelesen wurden, spart die KI keine Stunde, sie kostet 17 bis 23. Der Gewinn ist dann, dass die Antworten erstmals ausgewertet werden, nicht die Zeit.

Vier typische Einstiegsfehler

1. Texte unstrukturiert in die KI eingeben. “Hier sind die Feedbacks: [langer Text]”, das Ergebnis ist eine allgemeine Zusammenfassung, keine systematische Auswertung. Besser: dem Modell klare Auswertungsaufgaben geben (Kategorisierung nach Themen, Sentiment je Kategorie, Top-3-Kritikpunkte, Top-3-Lobes) und das gewünschte Output-Format im Prompt beschreiben. Struktur im Prompt ergibt Struktur im Output.

2. Das KI-Ergebnis als vollständige Wahrheit behandeln. Eine KI-Zusammenfassung kann relevante Einzelantworten übersehen, die statistisch selten, aber qualitativ wichtig sind. Besonders für Beschwerden oder außergewöhnliches Lob empfiehlt sich ein kurzes Überfliegen der Rohdaten nach der KI-Auswertung, 15 Minuten, keine vollständige Lektüre.

3. Die Erkenntnisse nicht weiterleiten. Die Auswertung ist kein Selbstzweck. Wenn Trainer kein Feedback aus den KI-Analysen erhalten, ändert sich nichts, die Ergebnisse landen in einem Ordner und werden nie gelesen. Gegenmittel: Die KI-Zusammenfassung direkt nach der Auswertung per E-Mail oder Chat an die zuständige Trainerin schicken, zusammen mit maximal zwei konkreten Handlungsempfehlungen. Wer das im selben Schritt erledigt, in dem er die Auswertung ausführt, verhindert, dass die Erkenntnisse im Tagesgeschäft verschwinden.

4. Keine Regelmäßigkeit etablieren, das ist der stille Killer. Die größte Gefahr ist nicht schlechte Auswertung, sondern keine Auswertung. Wenn der Prozess von einem aufwändigen manuellen Schritt abhängt, passiert er selten. Wer den Workflow einmal aufgesetzt hat (Bogen ausfüllen → Antworten exportieren → Prompt ausführen → Bericht ablegen), muss ihn zur Routine machen, nicht zum Sonderfall.

Was mit der Einführung wirklich passiert, und was nicht

Trainer, die zum ersten Mal systematisches qualitatives Feedback über ihre Kurse erhalten, reagieren verschieden:

Erleichterung: Viele wollten schon lange wissen, was Teilnehmende wirklich denken, und hatten keinen Weg, das systematisch zu erfassen. Die erste KI-Auswertung wird oft als Befreiung erlebt: “Endlich weiß ich, warum das Tempo-Problem schon das fünfte Mal auftaucht.”

Abwehr: Ein Teil der Trainer erlebt das systematische Feedback als Kontrolle. Besonders wenn die Ergebnisse für Leistungsbewertung genutzt werden sollen, entsteht Widerstand. Empfehlung: Qualitatives Feedback zunächst nur für interne Kursentwicklung nutzen, nicht für Personalentscheidungen. Wo ein Betriebsrat besteht und die Auswertung Leistungsvergleiche angestellter Trainer ermöglicht, kann sie mitbestimmungspflichtig sein (§ 87 Abs. 1 Nr. 6 BetrVG), kläre das vor dem Start. Wenn Trainer spüren, dass die Erkenntnisse ihrer eigenen Entwicklung dienen, nicht ihrer Bewertung, sinkt der Widerstand erheblich.

Überforderung durch zu viele Erkenntnisse: Wer 50 Kurse pro Jahr hat und erstmals alle Textantworten auswertet, bekommt sehr viel mehr Input als vorher. Die Priorisierung ist dann die eigentliche Herausforderung: Was ändert man als erstes? Empfehlung: Zunächst nur die drei häufigsten Kritikpunkte adressieren, nicht alles auf einmal.

Realistischer Zeitplan mit Risikohinweisen

Häufige Einwände, und was dahintersteckt

“Unsere Teilnehmenden füllen die Textfelder sowieso kaum aus.” Das ist oft ein Designproblem des Bogens. Kurze, konkrete Fragen (“Was würden Sie im nächsten Kurs anders machen?” statt “Weitere Anmerkungen”) erhöhen die Ausfüllrate erheblich. Und selbst wenn nur 30 Prozent der Teilnehmenden etwas schreiben: Bei 50 Bögen sind das 15 qualitative Antworten pro Frage. Für belastbare Häufigkeiten ist das zu wenig (unter 20 Antworten sind Muster unsicher, siehe oben), für konkrete Einzelhinweise reicht es. Häufigkeiten werden belastbar, wenn du mehrere Durchläufe desselben Kurses zusammen auswertest.

“Wir nutzen einen standardisierten Bogen vom Dachverband, den können wir nicht ändern.” Dann auswerten, was vorhanden ist. Das Argument gilt für die Optimierung des Bogens, nicht für die Nutzung der bereits vorhandenen Antworten. Die stecken im Archiv und wurden nie ausgewertet.

“Das verfälscht die Qualitätssicherung, wenn eine KI entscheidet, was wichtig ist.” Die KI entscheidet nicht, sie aggregiert und visualisiert, was Teilnehmende geschrieben haben. Die Interpretation bleibt beim Menschen. Und: Die manuelle Alternative ist nicht “objektive menschliche Auswertung”, sondern “eine zufällige Person liest 30 Bögen und merkt sich, was ihr auffiel”. Das ist keine bessere Grundlage.

Woran du merkst, dass das zu dir passt

• Deine Evaluationsbögen enthalten offene Textfragen, die nach jedem Kurs ausgefüllt werden
• Die Auswertung dieser Textantworten passiert selten oder nicht vollständig
• Du hast das Gefühl, dass in den Texten wichtige Erkenntnisse stecken, die du nicht nutzt
• Trainer erhalten kein qualitatives Feedback aus Evaluierungen
• Du möchtest Trainer-Performance und Kursqualität systematisch über Zeit beobachten

Wann es sich (noch) nicht lohnt, drei Ausschlusskriterien:

1. Weniger als 10 Kurse pro Jahr mit Textfeedback. Der Einrichtungsaufwand für einen strukturierten Workflow ist dann nicht gerechtfertigt. Für gelegentliche Auswertungen reicht ein manueller Prompt ohne Prozess.

2. Evaluationsbögen sind rein numerisch, keine offenen Fragen. Dann gibt es keine Textdaten zum Auswerten. In diesem Fall lohnt sich zunächst die Überlegung, ob 1–2 offene Fragen sinnvoll ergänzt werden können.

3. Das Institut hat keinen Prozess, wie Feedback-Erkenntnisse in Kursverbesserungen einfließen. Ein schnelleres Auswertungstool löst das strukturelle Problem nicht. Wer keinen Weg hat, wie qualitatives Feedback die Kursgestaltung beeinflusst, wird von mehr Erkenntnissen überfordert, ohne Veränderung.

Das kannst du heute noch tun

Nimm die Textantworten aus einem kürzlich abgeschlossenen Kurs, auch wenn es nur 15 Bögen sind. Am einfachsten ein Kurs, den du selbst geleitet hast, sonst frag die Trainerin vorher, denn die Antworten bewerten sie (siehe Datenschutz). Kopiere die Freitextantworten auf alle offenen Fragen in ein Dokument, ersetze Namen von Teilnehmenden, Kolleginnen und Firmen durch Platzhalter und schalte in Claude oder ChatGPT vorher das Training mit deinen Eingaben ab. Dann füge die Texte zusammen mit dem folgenden Prompt ein. Das dauert 15 Minuten und zeigt dir, was du bisher nicht gesehen hast.

Quellen & Methodik

• AZAV-Qualitätssicherungsanforderungen: § 2 Abs. 4 AZAV (Trägerzulassung), gesetze-im-internet.de/azav.
• Mitbestimmung bei Leistungsauswertung: § 87 Abs. 1 Nr. 6 BetrVG, gesetze-im-internet.de/betrvg.
• Zeitwerte für manuelle und KI-gestützte Auswertung: Richtwerte der Redaktion, nicht gemessen.
• Netigate und Power Automate: Tarife und Funktionsumfang laut unseren Toolseiten, Stand September 2026.
• Datenschutz AVV Art. 28 DSGVO: Datenschutz-Grundverordnung, aktuelle Fassung; Empfehlungen des Bayerischen Landesamts für Datenschutzaufsicht zum KI-Einsatz in Unternehmen (2024).

Du willst wissen, welcher Auswertungsworkflow zu deiner Kursgröße und eurem Qualitätssicherungsprozess passt? Meld dich, wir finden gemeinsam das Setup, das tatsächlich genutzt wird.