Die Erhebung von Selbstauskünften ist eines der wichtigsten Instrumente bei der Erforschung der menschlichen Bevölkerung in Fragen des Geistes in zahlreichen Disziplinen, von der Soziologie über die Psychologie bis hin zur Politikwissenschaft. Schließlich kennt nur jeder Einzelne die Wahrnehmungen, Gefühle oder Gedanken seines Geistes. Das Global Mind Project verwendet eine relativ neue Methodik der Datenerfassung: Internet-basierte Öffentlichkeitsarbeit, bei der die Menschen zu einer anonymen Selbstberichtsbewertung geleitet werden, die sie durchführen, um ihre eigene Punktzahl und einen personalisierten Selbsthilfebericht zu erhalten. Hier werden wir jeden Teil dieser Methodik entpacken, um die Frage zu beantworten, ob die Daten des Global Mind Project repräsentativ sind, und einen Vergleich der Antworten auf den Familienstand in den Vereinigten Staaten von Amerika zeigen, Daten aus dem Global Mind Project mit Daten aus der Volkszählung der Vereinigten Staaten (Spoiler: Sie verfolgen sie recht gut).
Was ist repräsentativ?
Eines der Hauptziele des Umfragedesigns bestand darin, eine repräsentative Stichprobe einer Grundgesamtheit zu erhalten, was bedeutet, dass die Ergebnisse der Umfragestichprobe die Ergebnisse widerspiegeln, die Sie für die gesamte Grundgesamtheit erhalten würden. In der Regel werden Umfragen, die behaupten, repräsentativ zu sein, die Teilnehmer nach Alter, Geschlecht und Einkommensgruppen geschichtet. Es gibt jedoch zahlreiche andere Faktoren, die die Repräsentativität beeinflussen können, je nachdem, wonach Sie fragen. Wie du dich zum Beispiel fühlst oder über etwas denkst, könnte von der Art des Berufs abhängen, in dem du dich befindest. Trucker und Lehrer haben im Schnitt in etwa das gleiche Einkommen. Ich kann mir vorstellen, dass sie über viele Dinge ganz anders denken. Und wenn Sie nach psychischer Gesundheit fragen, haben sie wahrscheinlich ganz andere Probleme. Wie stellen Sie sicher, dass Sie die Berufe in Ihrer Stichprobe proportional repräsentieren, geschweige denn nur Lkw-Fahrer und Lehrer? Es gibt auch so viele andere Faktoren, die Ihre Antworten beeinflussen können, von der Religionszugehörigkeit über die Familienstruktur bis hin zu Lebensgewohnheiten.
Viele globale Umfragen und Umfragen haben nur 1000 Teilnehmer pro Land. Für große Länder wie Indien zum Beispiel, in denen es über eine Milliarde Einwohner gibt und die Vielfalt riesig ist, ist es lächerlich, bei dieser Stichprobengröße Repräsentativität zu behaupten – obwohl sie das tun.
Fazit: Der Weg zur Repräsentativität erfordert viel mehr als nur eine Schichtung nach Alter, Geschlecht und Einkommen. Keine Umfrage erfasst und repräsentiert alle demografischen Segmente – nicht nur wegen der Skala, sondern auch, weil viele dieser Faktoren unbekannt sind und man nicht einfach nach mehreren Faktoren stratifizieren kann, die man nicht einmal kennt, bis man die Person fragt.
Wie werden Sie also repräsentativ?
Je größer, desto besser
Der beste Weg, um repräsentativ zu sein, ist die Skalierung – ein größerer Maßstab wird immer besser darin, sich der Gesamtbevölkerung anzunähern. Traditionelle Erhebungsmethoden, die Telefonanrufe oder persönliche Besuche beinhalten, sind teuer und zeitaufwändig und begrenzen die Anzahl der Personen, die Sie befragen können. Das Internet ermöglicht eine viel größere Skalierung, indem es die Kostengleichung dramatisch verändert und auch eine Geschwindigkeit ermöglicht, die mit einem Vermessungsingenieur in der Mitte einfach nicht möglich ist. Zum Beispiel hat das untersuchte Global Mind Project seit seinem Start Mitte 2020 ~1 Million und allein im Jahr 2022 ~500.000 Menschen befragt (eine Zahl, die jährlich wächst), während andere bekannte globale Studien maximal 150.000 pro Jahr und typischerweise 1.000 – 2.000 pro Land befragen.
Natürlich ist es auf diese Weise nicht möglich, Menschen mit geringer Lese- und Schreibfähigkeit oder Offline-Bevölkerungen zu erreichen. Das Global Mind Project konzentriert sich jedoch auf die internetfähige Welt. Sie können durch Öffentlichkeitsarbeit auf verschiedenen Internetplattformen nach bestimmten Altersgruppen, Geschlechtergruppen und Regionen gezielt ansprechen. Das Global Mind Project nutzt vor allem Google und Facebook.
Aber woher wissen Sie, dass Sie nicht nur Menschen aus einer Gruppe oder nur einer Art von Person bekommen? Nun, das tun Sie nicht – es sei denn, Sie fragen.
Weitere demografische Informationen
Angesichts der Tatsache, dass es so viele verschiedene demografische Einflussfaktoren gibt – insbesondere auf den mentalen Zustand, der den Kern des Global Mind Project bildet, können wir nicht von vornherein wissen, welche das sind und wer Teil welcher Gruppe ist. Es ist daher nicht möglich, nur die Personen zu rekrutieren, die für die Repräsentativität wichtig sind. Die Lösung besteht darin, zu fragen. Anstatt also zu versuchen, die Befragten innerhalb jeder Alters-, Geschlechts- und geografischen Gruppe vorab auszuwählen, lassen wir es jedem überlassen und fragen viele demografische Faktoren ab, von Einkommen über ethnische Zugehörigkeit, Bildung, Beschäftigung, die Art des Umfelds, in dem sie leben, Familien- oder Haushaltsstruktur und mehr. Dadurch ist es möglich, verschiedene segmentierte Sichten auf die Bevölkerung bereitzustellen. Und wenn die Daten größer werden, wird es dann möglich, demografisch repräsentativere gewichtete Durchschnittswerte der Bevölkerung zu erstellen.
Aber wie stellen Sie sicher, dass die Leute ihre Antworten nicht vortäuschen?
Den Zwischenhändler beseitigen und es lohnenswert machen
Bei einer herkömmlichen Umfrage muss der Teilnehmer seine Antworten einer echten Person mitteilen und sich in vielen Fällen identifizieren. Das stellt eine Herausforderung dar, wenn man heikle Fragen stellt oder Fragen zu sehr privaten Dingen, wie wir es im Global Mind Project tun. Die meisten Menschen wollen Probleme bestimmter Art einer anderen Person gegenüber nicht zugeben und mäßigen ihre Reaktion oft, um auf diese Person auf eine bestimmte Weise zu erscheinen, um Peinlichkeiten oder Verurteilungen zu vermeiden. Indem wir es anonym machen, nehmen wir uns diese Angst. Der Umfrager kann auch seine eigenen Vorurteile oder Einstellungen haben, die sich einschleichen und beeinflussen, wie der Befragte antwortet. Auch dies entfällt.
Zweitens werden die Mitarbeiter nicht dafür bezahlt, das Global Mind MHQ-Assessment abzulegen. Sie nehmen auch nicht nur deshalb an dieser Umfrage teil, weil sie viel Zeit haben, um an der Forschung teilzunehmen. Beide Faktoren können zu verzerrten Motivationen für die Art und Weise führen, wie Menschen antworten. Stattdessen nehmen die Menschen an dieser Umfrage teil, um ihre Werte für das psychische Wohlbefinden und einen individuellen Selbsthilfebericht zu erhalten. Dies fügt eine ganz andere Art von Motivation hinzu – um ein genaues Bild von sich selbst zu bekommen, müssen sie ehrlich antworten und die 15-20 Minuten durchhalten, die es dauert, es zu vervollständigen.
Verschiedene interne Kontrollen, die wir in die Bewertung eingebettet haben, ermöglichen es uns festzustellen, welche Datensätze legitim sind und welche nicht.
Wie repräsentativ sind die Daten nun?
Nun, wir können einige Überprüfungen durchführen, insbesondere für Länder, in denen die Internetdurchdringung so hoch ist, dass die internetfähige Bevölkerung fast die gesamte Bevölkerung ausmacht. In den Vereinigten Staaten zum Beispiel spiegeln sich verschiedene globale Trends, die vom US Census Bureau erfasst wurden, zum Beispiel in der American Community Survey, der größten Umfrage, in den Global Mind-Daten wider. Die folgenden Grafiken zeigen beispielsweise, dass die Trends des Familienstands und der Bildung nach Alter sehr ähnlich sind. Einen detaillierteren Vergleich der Global Mind Data mit den Daten des US Census Bureau sowie anderen nationalen Datensätzen finden Sie hier.
Abbildung 1.
Natürlich ist es wichtig zu bedenken, dass das Global Mind Project nur Stichproben der internetfähigen Bevölkerung erfasst. Je geringer die Internetdurchdringung ist, desto mehr weicht die Stichprobe von der nationalen Repräsentativität ab. Vielmehr bietet es einen Vergleich von Menschen mit ähnlicherem Zugang und ähnlichen Mitteln rund um den Globus.
Wie wir Länderzuschlagstoffe konstruieren
Im Allgemeinen verwenden wir in den Länderaggregaten, die wir in unseren Berichten zeigen, einen nach Alter und Geschlecht gewichteten Durchschnitt, wobei die Gewichtungen auf der Repräsentation der Alters- und Geschlechtsgruppe in der Bevölkerung basieren. Für Länder mit einer höheren Internetdurchdringung wird dies sehr repräsentativ sein. In Ländern, in denen die Internetdurchdringung gering ist, repräsentieren die Global Mind-Daten tendenziell eine gebildetere Bevölkerungsgruppe mit höherem Einkommen als das gesamte Land, sind aber ziemlich repräsentativ für die internetfähige Bevölkerung der befragten Sprachgruppe.
Die Daten sind für Forscher auf der ganzen Welt für nicht-kommerzielle Zwecke zugänglich, also zögern Sie nicht, sie zu erforschen und sich selbst zu überzeugen. Sie erhalten Zugang über unseren Forscher-Hub.