Lab Talk

Representatividade dos dados do projeto Global Mind

A pesquisa de autorrelato tem sido uma das principais ferramentas no estudo das populações humanas em questões mentais em várias disciplinas, da Sociologia à Psicologia e à Ciência Política. Afinal, apenas cada indivíduo conhece as perceções, sentimentos ou pensamentos de sua mente. O Global Mind Project usa uma metodologia relativamente nova de aquisição de dados: divulgação baseada na Internet, direcionando as pessoas para uma avaliação anônima de autorrelato que elas tomam com o objetivo de obter sua própria pontuação e relatório de autoajuda personalizado. Aqui vamos descompactar cada parte desta metodologia para responder à pergunta se os dados do Global Mind Project são representativos e mostrar uma comparação das respostas do estado civil nos Estados Unidos dados do Global Mind Project com dados do Censo dos Estados Unidos (spoiler: eles rastreiam muito bem).

O que é representativo?

Um dos principais objetivos da conceção do inquérito por questionário tem sido obter uma amostra representativa de uma população, o que significa que os resultados da amostra do inquérito refletiriam os resultados que obteria para toda a população. Normalmente, as pesquisas que se dizem representativas recrutam participantes estratificados por idade, sexo e grupos de renda. No entanto, existem inúmeros outros fatores que podem influenciar a representatividade, dependendo do que você está perguntando. Por exemplo, a forma como se sente ou pensa sobre algo pode depender do tipo de ocupação em que se encontra. Caminhoneiros e professores têm, em média, a mesma renda. Imagino que pensem de forma bem diferente sobre muitas coisas. E se você está perguntando sobre saúde mental, eles provavelmente têm um conjunto totalmente diferente de problemas. Como você garante que você represente proporcionalmente as ocupações em sua amostra, sem falar apenas em caminhoneiros e professores? Existem muitos outros fatores que também podem influenciar suas respostas, desde a filiação religiosa até a estrutura familiar e os hábitos de vida.

Muitas sondagens e inquéritos globais têm apenas 1000 participantes por país. Para países grandes como a Índia, por exemplo, onde a população é superior a mil milhões e a diversidade é enorme, é risível reivindicar representatividade com esse tamanho de amostra – embora o façam.

Resumindo: avançar para a representatividade requer muito mais do que estratificação de idade/sexo/renda. Nenhuma pesquisa captura e representa todos os segmentos demográficos – não apenas por causa da escala, mas também porque muitos desses fatores são desconhecidos e você não pode estratificar facilmente por vários fatores que você nem sabe até perguntar à pessoa.

Então, como você consegue ser representativo?

Quanto maior, melhor

A melhor maneira de avançar no sentido de ser representativo é a escala – uma escala maior ficará cada vez melhor na aproximação da população em geral. Os métodos tradicionais de pesquisa que envolvem telefonemas ou visitas presenciais são caros e demorados e limitam o número de pessoas que você pode pesquisar. A Internet permite uma escala muito maior, alterando drasticamente a equação de custo e também permitindo uma velocidade que simplesmente não é possível com um topógrafo no meio. Por exemplo, o Global Mind Project amostrado tem amostrado ~1 milhão desde o seu lançamento em meados de 2020 e ~500.000 pessoas apenas em 2022 (um número que está crescendo anualmente), enquanto outros estudos globais bem conhecidos amostram um máximo de 150.000 por ano, com tipicamente 1.000 – 2.000 por país.

É claro que não é possível alcançar populações pouco alfabetizadas ou offline desta forma. No entanto, o Global Mind Project está focado no mundo habilitado para Internet. Pode segmentar por idade, grupos de género e geografias específicas através de ações de sensibilização em várias plataformas da Internet. O Global Mind Project usa principalmente Google e Facebook.

Mas como você sabe que não está recebendo pessoas de apenas um grupo ou apenas um tipo de pessoa? Bem, você não – a menos que você pergunte.

Mais informações demográficas

Dado que existem tantos fatores demográficos influenciadores diferentes – particularmente do estado mental de cada um, que é o núcleo do Global Mind Project, não podemos saber a priori quais são e quem faz parte de qual grupo. Por conseguinte, não é possível recrutar apenas as pessoas que são importantes para a representatividade. A solução é perguntar. Assim, em vez de tentar pré-selecionar os entrevistados, dentro de cada grupo geográfico de idade-sexo, permitimos que qualquer pessoa pegue e pergunte a muitos fatores demográficos, da renda à etnia, educação, emprego, o tipo de ambiente em que vivem, estrutura familiar ou doméstica e muito mais. Isso torna possível fornecer várias visões segmentadas da população. E à medida que os dados aumentam, torna-se possível criar médias ponderadas mais representativas demograficamente da população.

Mas como garantir que as pessoas não estão falsificando suas respostas?

Remover o intermediário e fazê-lo valer a pena

A pesquisa tradicional exige que o participante conte suas respostas a uma pessoa real e, em muitos casos, se identifique. Isso representa um desafio quando você está fazendo perguntas sensíveis ou perguntas sobre coisas muito privadas, como fazemos no Global Mind Project. A maioria das pessoas não quer admitir problemas de certos tipos para outra pessoa e muitas vezes modera sua resposta para parecer de uma certa maneira para essa pessoa para evitar constrangimento ou julgamento. Ao torná-lo anónimo, eliminamos esse medo. O entrevistador também pode ter seus próprios preconceitos ou atitudes que se infiltram e influenciam a forma como o entrevistado responde. Isso também é eliminado.

Em segundo lugar, as pessoas não são pagas para fazer a avaliação do MHQ da Global Mind. Também não aceitam este inquérito simplesmente porque têm muito tempo nas mãos para participar na investigação. Ambos os fatores podem criar motivações distorcidas para a forma como as pessoas respondem. Em vez disso, as pessoas fazem esta pesquisa para obter suas pontuações de bem-estar mental e relatório de autoajuda individualizado. Isso adiciona um tipo muito diferente de motivação – para obter uma imagem precisa de si mesmos, eles têm que responder honestamente e mantê-lo durante os 15-20 minutos que leva para completá-lo.

Várias verificações internas que incorporamos na avaliação nos permitem determinar quais registros são legítimos e quais não são.

Então, agora, quão representativos são os dados?

Bem, podemos fazer algumas verificações, especialmente para países onde a penetração da Internet é elevada, de tal forma que a população habilitada para a Internet é quase toda a população. Por exemplo, nos Estados Unidos, várias tendências globais capturadas pelo US Census Bureau, por exemplo, no American Community Survey, que é a maior pesquisa lá fora, são espelhadas nos dados da Global Mind. Os gráficos abaixo, por exemplo, mostram que as tendências do estado civil e da educação por idade são muito semelhantes. Você pode encontrar uma comparação mais detalhada dos Dados da Mente Global com os dados do US Census Bureau, bem como outros conjuntos de dados nacionais aqui.

Figura 1.

É claro que é importante ter em mente que o Global Mind Project apenas amostras da população habilitada para Internet. Consequentemente, quanto menor for a penetração da Internet, mais a amostra se desviará da representatividade nacional. Em vez disso, fornece uma comparação de pessoas de acesso e meios mais semelhantes em todo o mundo.

Como construímos agregados por país

Geralmente, nos agregados por país que mostramos em nossos relatórios, usamos uma média ponderada idade-sexo, onde as ponderações são baseadas na representação do grupo de idade-gênero na população. Para os países com maior penetração da Internet, tal será estreitamente representativo. Enquanto em países onde a penetração da Internet é baixa, os dados da Global Mind tendem a representar uma população mais educada e de renda mais alta do que todo o país, mas ser bastante representativos da população habilitada para Internet do grupo linguístico pesquisado.

Os dados estão abertos para pesquisadores de todo o mundo para fins não comerciais, então sinta-se à vontade para explorá-los e se convencer. Pode aceder através do nosso centro de investigação.

 

Deixe um comentário

O seu endereço de email não será publicado. Campos obrigatórios marcados com *