Lab Talk

Rappresentatività dei dati del progetto Global Mind

L’indagine self-report è stata uno degli strumenti principali nello studio delle popolazioni umane in materia di mente in numerose discipline, dalla sociologia alla psicologia alle scienze politiche. Dopotutto, solo ogni individuo conosce le percezioni, i sentimenti o i pensieri della propria mente. Il Global Mind Project utilizza una metodologia relativamente nuova di acquisizione dei dati: la sensibilizzazione basata su Internet, indirizzando le persone verso una valutazione anonima di autovalutazione che effettuano allo scopo di ottenere il proprio punteggio e un rapporto di auto-aiuto personalizzato. Qui analizzeremo ogni parte di questa metodologia per rispondere alla domanda se i dati del Global Mind Project siano rappresentativi e mostreremo un confronto tra le risposte dello stato civile nei dati del Global Mind Project e i dati del censimento degli Stati Uniti (spoiler: tracciano abbastanza bene).

Che cos’è rappresentativo?

Uno degli obiettivi principali della progettazione dell’indagine è stato quello di ottenere un campione rappresentativo di una popolazione, il che significa che i risultati del campione dell’indagine rifletterebbero i risultati che si otterrebbero per l’intera popolazione. In genere i sondaggi che affermano di essere rappresentativi recluteranno partecipanti stratificati per età, sesso e gruppi di reddito. Tuttavia, ci sono numerosi altri fattori che possono influenzare la rappresentatività a seconda di ciò che stai chiedendo. Ad esempio, il modo in cui ti senti o pensi a qualcosa potrebbe dipendere dal tipo di occupazione che svolgi. I camionisti e gli insegnanti hanno in media circa lo stesso reddito. Immagino che la pensino in modo molto diverso su molte cose. E se stai chiedendo della salute mentale, probabilmente hanno una serie di problemi completamente diversi. Come ti assicuri di rappresentare proporzionalmente le occupazioni nel tuo campione, per non parlare solo dei camionisti e degli insegnanti? Ci sono anche molti altri fattori che possono influenzare le tue risposte, dall’affiliazione religiosa alla struttura familiare alle abitudini di vita.

Molti sondaggi e indagini globali hanno solo 1000 partecipanti per paese. Per i grandi paesi come l’India, ad esempio, dove la popolazione supera il miliardo di abitanti e la diversità è enorme, è ridicolo rivendicare la rappresentatività con una tale dimensione del campione, anche se lo fanno.

In conclusione: il passaggio alla rappresentatività richiede molto di più della stratificazione di età/genere/reddito. Nessuna indagine cattura e rappresenta tutti i segmenti demografici, non solo a causa della scala, ma anche perché molti di questi fattori sono sconosciuti e non è possibile stratificare facilmente in base a più fattori che non si conoscono nemmeno fino a quando non si chiede alla persona.

Quindi, come si fa ad essere rappresentativi?

Più grande è, meglio è

Il modo migliore per muoversi verso l’essere rappresentativi è la scala: una scala più grande migliorerà sempre di più nell’approssimare la popolazione complessiva. I metodi tradizionali di indagine, che prevedono telefonate o visite di persona, sono costosi e richiedono molto tempo e limitano il numero di persone che è possibile intervistare. Internet consente una scala molto più ampia cambiando drasticamente l’equazione dei costi e consentendo anche una velocità che semplicemente non è possibile con un geometra nel mezzo. Ad esempio, il Global Mind Project ha campionato ~1 milione dal suo lancio a metà del 2020 e ~500.000 persone nel solo 2022 (un numero che cresce ogni anno), mentre altri noti studi globali campionano un massimo di 150.000 all’anno, con in genere 1.000-2.000 per paese.

Naturalmente non è possibile raggiungere le popolazioni poco alfabetizzate o offline in questo modo. Tuttavia, il Global Mind Project si concentra sul mondo abilitato da Internet. Puoi rivolgerti per età, gruppi di sesso e aree geografiche specifiche attraverso la sensibilizzazione su varie piattaforme Internet. Il Global Mind Project utilizza principalmente Google e Facebook.

Ma come fai a sapere che non stai ricevendo persone da un solo gruppo o da un solo tipo di persona? Beh, non lo fai, a meno che tu non lo chieda.

Maggiori informazioni demografiche

Dato che ci sono così tanti fattori demografici che influenzano – in particolare lo stato mentale di una persona, che è il fulcro del Global Mind Project, non possiamo sapere a priori quali siano e chi fa parte di quale gruppo. Non è quindi possibile assumere solo le persone che sono importanti per la rappresentatività. La soluzione è chiedere. Quindi, piuttosto che cercare di preselezionare gli intervistati, all’interno di ogni gruppo di età-sesso-area geografica, lasciamo che chiunque lo prenda e chieda molti fattori demografici, dal reddito all’etnia, all’istruzione, all’occupazione, al tipo di ambiente in cui vivono, alla struttura familiare o familiare e altro ancora. In questo modo è possibile fornire diverse visioni segmentate della popolazione. E man mano che i dati diventano più grandi, diventa possibile creare medie ponderate demograficamente più rappresentative della popolazione.

Ma come si fa a garantire che le persone non stiano falsificando le loro risposte?

Eliminare l’intermediario e renderlo utile

Il sondaggio tradizionale richiede che il partecipante racconti le proprie risposte a una persona reale e, in molti casi, si identifichi. Questo pone una sfida quando si pongono domande delicate o domande su cose molto private, come facciamo nel Global Mind Project. La maggior parte delle persone non vuole ammettere problemi di certi tipi a un’altra persona e spesso modera la propria risposta per apparire in un certo modo a quella persona per evitare imbarazzo o giudizio. Rendendolo anonimo togliamo questa paura. Il sondaggista può anche avere i propri pregiudizi o atteggiamenti che si insinuano e influenzano il modo in cui l’intervistato risponde. Anche questo viene eliminato.

In secondo luogo, le persone non sono pagate per sostenere la valutazione MHQ di Global Mind. Né partecipano a questo sondaggio semplicemente perché hanno molto tempo a disposizione per partecipare alla ricerca. Entrambi questi fattori possono creare motivazioni distorte per il modo in cui le persone rispondono. Invece, le persone partecipano a questo sondaggio per ottenere i loro punteggi di benessere mentale e un rapporto di auto-aiuto personalizzato. Questo aggiunge un tipo di motivazione molto diverso: per ottenere un’immagine accurata di se stessi, devono rispondere onestamente e attenersi ad essa per i 15-20 minuti necessari per completarla.

Vari controlli interni che abbiamo incorporato nella valutazione ci consentono di determinare quali registrazioni sono legittime e quali no.

Quindi, ora, quanto sono rappresentativi i dati?

Beh, possiamo fare alcuni controlli, soprattutto per i paesi in cui la penetrazione di Internet è elevata, in modo tale che la popolazione abilitata a Internet sia quasi tutta la popolazione. Ad esempio, negli Stati Uniti, varie tendenze globali catturate dall’US Census Bureau, ad esempio nell’American Community Survey, che è il più grande sondaggio in circolazione, si rispecchiano nei dati di Global Mind. I grafici sottostanti, ad esempio, mostrano che le tendenze dello stato civile e dell’istruzione per età sono molto simili. Puoi trovare un confronto più dettagliato tra i dati del Global Mind e i dati dell’US Census Bureau e altri set di dati nazionali qui.

Figura 1.

Naturalmente è importante tenere a mente che il Global Mind Project campiona solo la popolazione abilitata a Internet. Di conseguenza, più bassa è la penetrazione di Internet, più il campione si discosterà dalla rappresentatività nazionale. Piuttosto, fornisce un confronto tra persone con accesso e mezzi più simili in tutto il mondo.

Come costruiamo gli aggregati nazionali

In generale, negli aggregati per paese che mostriamo nei nostri rapporti, utilizziamo una media ponderata per età-sesso, in cui le ponderazioni si basano sulla rappresentazione della fascia di età-sesso nella popolazione. Per i paesi con una maggiore penetrazione di Internet, questo sarà strettamente rappresentativo. Mentre nei paesi in cui la penetrazione di Internet è bassa, i dati di Global Mind tendono a rappresentare una fascia demografica più istruita e con un reddito più elevato rispetto all’intero paese, ma sono abbastanza rappresentativi della popolazione abilitata a Internet del gruppo linguistico intervistato.

I dati sono aperti ai ricercatori di tutto il mondo per scopi non commerciali, quindi sentitevi liberi di esplorarli e convincervi. Puoi accedere tramite il nostro hub di ricerca.

 

Lascia un commento

Il tuo indirizzo email non sarà pubblicato. I campi obbligatori sono contrassegnati *