Messfehler in der Harmonisierung soziodemographischer Variablen für den internationalen Vergleich

Zusammenfassung

Die Güte von Umfragedaten ist das zentrale Anliegen des „Total Survey Error“ Ansatzes. Dabei stehen nationale Surveys im Vordergrund der Betrachtungen, während Messfehler in internationalen länder- und kulturvergleichenden Datenerhebungen kaum diskutiert werden. In unserem Beitrag stellen wir Probleme der vergleichenden Messung soziodemographischer Hintergrundmerkmale dar. Vielfältige Literatur findet sich zu der angemessenen Übersetzung der Erhebungsinstrumente sozialwissenschaftlicher Surveys. Aber in der Gesamtheit und Komplexität vergleichender Umfragen identifizieren wir weitere Fehlerquellen, die besonders aus fehlerhafter oder missgeleiteter Harmonisierung entstehen. Über diese Schwächen gibt es wenig bis keine Literatur. Sehr kurz werden wir auf Übersetzungsprobleme am Beispiel falscher sprachlicher Übertragung eingehen. Ausführlich stellen wir die fehlerhafte Auswahl der Referenzstatistik dar, die zur Bildung der Antwortkategorien benötigt wird (z.B. Nettohaushaltseinkommen und die Dezile der nationalen Einkommensverteilungen). Am Beispiel „privater Haushalt“ diskutieren wir die Bedeutung verschiedener nationaler, kultureller Konzepte, die einer Messung zugrunde liegen. Die Anwendung unterschiedlicher Konzepte generiert nicht oder nur bedingt vergleichbare Messwerte über die Länder und Kulturen. Die mangelhafte Umsetzung in ternational vereinbarter Messkonzepte in nationale Datenerhebungen stellen wir am Beispiel „höchster Bildungsabschluss“ dar. Zusammenfassend argumentieren wir, dass in länder- und kulturenvergleichenden Sozialerhebungen die Güte der Daten mehr ist als die bloße Vervielfältigung des „Total Survey Errors“ auf die teilnehmenden Länder und Kulturen. Sprachliche Äquivalenzen, strukturelle gesellschaftliche Unterschiede mit ihren unterschiedlichen Bürokratien und Prozeduren, gesetzliche Bedingungen der Bevölkerungsbefragung, kulturelle Unterschiede der messenden Items und unterschiedliche Gewohnheiten der Interviewdurchführung sind nicht Teil des TSE Paradigmas, aber sind dennoch verantwortlich für Messfehler in vergleichender Surveyforschung. In unserer Schlussbetrachtung formulieren wir acht Regeln, die bei der Harmonisierung soziodemographischer Messungen in vergleichenden Umfragen zu beachten sind, damit die Messfehler begrenzt oder gar ausgeschlossen werden.