Kontakt

Wie erkennt man einen Nonresponse Bias in Mitarbeiterbefragungen?

atwork ·
Wahlurne mit wenigen Stimmzetteln auf einem Holzschreibtisch, dahinter ein Großraumbüro mit leeren Stühlen

Die Rücklaufquote einer Mitarbeiterbefragung liegt bei 72 Prozent, die Ergebnisse sehen erfreulich aus, und trotzdem kündigen in den Monaten danach ausgerechnet Leute aus Teams, die angeblich zufrieden waren. Das kann ein Zufall sein. Es kann aber auch ein Nonresponse Bias sein: eine systematische Verzerrung, weil sich bestimmte Gruppen nicht an der Befragung beteiligt haben und ihre Sicht in den Daten fehlt.

Wer Mitarbeiterfeedback als Grundlage für Entscheidungen nutzt, sollte deshalb nicht nur auf die Antworten schauen, sondern auch auf die Frage, wer geantwortet hat. Dieser Artikel zeigt, wie sich ein Nonresponse Bias in der Mitarbeiterbefragung erkennen lässt, welche statistischen Prüfungen dafür sinnvoll sind und wie sich die Verzerrung korrigieren oder künftig vermeiden lässt.

Warnsignale in der Rücklaufquote systematisch prüfen

Ein Nonresponse Bias entsteht, wenn sich die Antwortenden systematisch von den Nichtantwortenden unterscheiden, und erste Hinweise darauf liefert die Rücklaufquote auf Ebene einzelner Einheiten. Die Gesamtquote allein sagt wenig aus, denn ein guter Durchschnitt kann grosse Unterschiede zwischen Bereichen verdecken.

Aufschlussreich ist deshalb der Blick auf die Teilquoten nach Abteilung, Standort, Hierarchiestufe, Altersgruppe, Beschäftigungsgrad und Betriebszugehörigkeit. Liegt die Beteiligung im Vertrieb bei 85 Prozent, in der Produktion oder im Aussendienst aber bei 40 Prozent, ist die Gesamtaussage nur für einen Teil der Belegschaft belastbar. Ebenso auffällig sind Teams mit plötzlich sinkender Beteiligung im Vergleich zur Vorjahresbefragung.

Typische Warnsignale sind:

  • stark abweichende Rücklaufquoten zwischen Teams oder Standorten
  • ein deutlicher Rückgang gegenüber früheren Befragungen, besonders nach Reorganisationen oder Führungswechseln
  • auffallend niedrige Beteiligung bei Gruppen mit hoher Fluktuation oder hohem Absentismus
  • sehr hohe Zufriedenheitswerte bei gleichzeitig geringer Teilnahme

Besonders der letzte Punkt verdient Aufmerksamkeit. Wenn gerade die Bereiche mit guten Ergebnissen eine niedrige Beteiligung aufweisen, spricht manches dafür, dass sich vor allem die Zufriedenen geäussert haben. Dann lohnt sich der nächste Schritt: der statistische Vergleich.

Teilnehmende und Belegschaft statistisch vergleichen

Der direkteste Test auf Nonresponse Bias ist der Vergleich der Zusammensetzung der Teilnehmenden mit der Zusammensetzung der gesamten Belegschaft anhand bekannter Merkmale. Dafür genügen Daten, die das HR-System ohnehin enthält, also keine zusätzliche Erhebung.

Man stellt dazu die Verteilung der Antwortenden nach Merkmalen wie Geschlecht, Alter, Funktion, Standort, Vertragsart und Dienstjahren der Verteilung in der Gesamtbelegschaft gegenüber. Ob Abweichungen zufällig oder bedeutsam sind, lässt sich mit einem einfachen Chi-Quadrat-Test prüfen. Wer die Teilnehmenden zum Beispiel zu 30 Prozent aus der Verwaltung rekrutiert, die Verwaltung aber nur 15 Prozent der Belegschaft ausmacht, sieht sofort, welche Stimmen überrepräsentiert sind.

Mehr als nur Demografie

Aussagekräftiger wird der Vergleich, wenn objektive HR-Kennzahlen einfliessen. Hatten die Teilnehmenden im Vorjahr weniger Fehltage als die Nichtteilnehmenden? Ist die Fluktuation unter den Nichtantwortenden höher? Solche Zusammenhänge zeigen, ob sich gerade die Risikogruppen aus der Befragung herausgehalten haben. Dabei gelten in der DACH-Region strenge Datenschutzvorgaben: Die Auswertung muss auf aggregierter Ebene erfolgen, und die Anonymität der Befragten bleibt in jedem Fall gewahrt.

Frühe und späte Antwortende gegenüberstellen

Ein pragmatischer Hinweis auf mögliche Verzerrungen ergibt sich aus der Antwortreihenfolge: Wer erst nach der zweiten oder dritten Erinnerung teilnimmt, ähnelt in seiner Haltung oft den Nichtantwortenden mehr als den Frühantwortenden. Dieses Vorgehen wird in der Umfrageforschung als Wellenanalyse bezeichnet.

Dazu teilt man die Teilnehmenden in Gruppen nach dem Zeitpunkt der Antwort ein, etwa in die erste Woche, die Mitte der Laufzeit und die Zeit nach den Erinnerungen. Anschliessend vergleicht man die Mittelwerte zentraler Skalen wie Engagement, Führung oder Bindungsabsicht. Sinken die Werte mit jeder Welle, ist es plausibel, dass die tatsächlich Fernbleibenden noch kritischer wären. Bleiben die Werte stabil, spricht das für eine geringere Verzerrungsgefahr.

Die Methode hat Grenzen, denn späte Antwortende sind nicht identisch mit Nichtantwortenden. Sie liefert aber eine schnelle, datenschutzkonforme Einschätzung der Richtung und ungefähren Grösse einer möglichen Verzerrung, ohne dass jemand nachträglich kontaktiert werden muss.

Ursachen hinter systematischer Nichtteilnahme verstehen

Nicht jede Nichtteilnahme ist Desinteresse. Entscheidend ist, ob sie zufällig verteilt ist oder ob dahinter Muster stecken, die selbst eine Aussage über die Organisation enthalten.

Häufige Ursachen lassen sich in zwei Gruppen einteilen. Die erste umfasst organisatorische Hürden: Mitarbeitende ohne festen Computerarbeitsplatz erreichen den Link nicht, Schichtarbeitende finden keine Zeit während der Arbeitszeit, Sprachbarrieren schliessen Teile der Belegschaft aus, oder die Einladung geht im Postfach unter. Diese Faktoren erzeugen Verzerrung, ohne dass sie etwas mit der Haltung der Betroffenen zu tun haben.

Die zweite Gruppe betrifft Vertrauen und Erfahrung. Wer in früheren Befragungen erlebt hat, dass nichts passiert ist, sieht keinen Sinn in einer erneuten Teilnahme. Wer an der Anonymität zweifelt, schweigt lieber. Gerade das ist heikel, denn Resignation und Misstrauen treten häufig dort auf, wo der Handlungsbedarf am grössten ist. Wer verstehen will, warum Kündigungen oft ohne Vorwarnung kommen, findet dazu mehr in diesem Beitrag über Befragungen, die zu selten stattfinden.

Nonresponse Bias korrigieren und künftig vermeiden

Eine bestehende Verzerrung lässt sich teilweise statistisch korrigieren, nachhaltiger wirkt jedoch eine Befragungspraxis, die Nichtteilnahme gar nicht erst begünstigt. Beides gehört zusammen.

Zur Korrektur wird häufig eine Gewichtung eingesetzt: Antworten von unterrepräsentierten Gruppen zählen stärker, damit die Stichprobe der tatsächlichen Belegschaftsstruktur entspricht. Das funktioniert aber nur für beobachtbare Merkmale und ersetzt keine fehlenden Stimmen. Ehrlicher ist es, bei grossen Abweichungen die Aussagekraft der Ergebnisse einzuschränken und Ergebnisse für Gruppen mit sehr niedriger Beteiligung nur mit Vorbehalt zu interpretieren.

Zur Vermeidung haben sich folgende Massnahmen bewährt:

  • Zugang erleichtern: mobile Teilnahme, QR-Codes, mehrsprachige Fragebögen und Zeitfenster während der Arbeitszeit
  • Anonymität glaubhaft machen: transparente Kommunikation über Mindestgruppengrössen und Datenschutz
  • Befragung kurz halten: wenige, wissenschaftlich fundierte Fragen statt langer Fragebögen
  • Ergebnisse rückspiegeln: sichtbar zeigen, was aus dem letzten Feedback entstanden ist
  • Regelmässig fragen: kürzere Befragungen in kürzeren Abständen senken die Hürde und zeigen Veränderungen früher

Der letzte Punkt ist der wirksamste Hebel. Wenn Mitarbeitende erleben, dass ihr Feedback zu konkreten Massnahmen führt, steigt die Bereitschaft zur Teilnahme von selbst.

Wie atwork bei Nonresponse Bias unterstützt

Die beschriebenen Prüfungen lassen sich manuell durchführen, kosten aber gerade in wachsenden Unternehmen viel Zeit. atwork unterstützt HR-Teams dabei, Verzerrungen früh zu erkennen und die richtigen Schlüsse daraus zu ziehen:

  • Laufende Rücklaufanalyse: Die Beteiligung wird während der Befragung nach Organisationseinheiten und Merkmalen sichtbar, sodass sich Lücken noch in der Laufzeit schliessen lassen. Mehr dazu unter Messen mit wissenschaftlich fundierten Befragungen.
  • Verknüpfung mit objektiven Daten: Feedback wird mit Kennzahlen wie Fluktuation oder Absentismus verbunden, damit erkennbar wird, ob Risikogruppen in der Befragung untervertreten sind.
  • Automatisierte Aktionspläne: Aus den Ergebnissen entstehen konkrete, auf den Kontext zugeschnittene Massnahmen, die Vertrauen aufbauen und die Teilnahme in Folgebefragungen stärken. Das zeigt die Lösung Handeln mit KI-gestützten Aktionsplänen.
  • Wirkungsmessung: Die Impact-Analyse macht sichtbar, ob Massnahmen tatsächlich etwas bewegen.

Möchten Sie wissen, wie belastbar Ihre letzten Befragungsergebnisse wirklich sind? Nehmen Sie Kontakt mit atwork auf und lassen Sie sich in einem unverbindlichen Gespräch zeigen, wie sich Nonresponse Bias in Ihrer Organisation erkennen und vermeiden lässt.

Ähnliche Artikel