How can the use of different modes of survey data collection introduce bias? A simple introduction to mode effects using directed acyclic graphs (DAGs)
Este artigo utiliza grafos acíclicos direcionados (DAGs) para explicar como desenhos de pesquisa de modo misto introduzem viés por meio de "efeitos de modo" e "seleção de modo", demonstrando que ajustes estatísticos ingênuos, como o condicionamento, podem inadvertidamente criar viés de colisor ao mesmo tempo em que defende a análise de viés quantitativo como uma solução mais robusta.
Artigo original sob licença CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Esta é uma explicação gerada por IA do artigo abaixo. Não foi escrita nem endossada pelos autores. Para precisão técnica, consulte o artigo original. Ler aviso legal completo
Imagine que você está tentando descobrir o quanto as pessoas realmente gostam de um tipo específico de comida. Para fazer isso, você pede que elas preencham uma pesquisa. Mas aqui está a reviravolta: você permite que elas escolham como responder. Alguns preenchem um formulário de papel, outros respondem em um site e alguns conversam com uma pessoa pelo telefone.
Este artigo argumenta que dar às pessoas a escolha de como responder pode, na verdade, atrapalhar seus resultados de duas maneiras sorrateiras. Os autores usam uma ferramenta chamada "Grafos Acíclicos Dirigidos" (DAGs) — que são basicamente fluxogramas simples que mostram relações de causa e efeito — para explicar por que isso acontece e como evitar ser enganado.
Aqui está a divisão do problema e as soluções, usando analogias do cotidiano.
Os Dois Grandes Problemas
1. O "Efeito de Modo" (O Problema da Máscara)
Imagine que você está perguntando às pessoas: "Você come vegetais?"
- Cenário A: Você pergunta cara a cara com um entrevistador amigável. As pessoas podem dizer "Sim!" porque não querem parecer mal diante de um ser humano (elas estão sendo socialmente educadas).
- Cenário B: Você pergunta em uma tela de computador privada. Elas podem digitar "Não" porque se sentem seguras e honestas.
A verdade sobre os hábitos alimentares delas não mudou, mas a resposta que elas deram mudou apenas por causa do "modo" (o método) que usaram. Isso é chamado de Efeito de Modo. É como usar uma máscara que muda seu rosto dependendo de quem está olhando para você.
2. A "Seleção de Modo" (O Problema da Autoseleção)
Agora, imagine quem escolhe o método.
- Jovens tecnologicamente instruídos podem preferir o site.
- Pessoas mais velhas ou sem internet podem preferir a chamada telefônica.
Isso significa que o grupo de pessoas respondendo no site é diferente do grupo que responde pelo telefone. Isso é Seleção de Modo. É como se você perguntasse apenas para pessoas que possuem carro sobre seus hábitos de direção; sua amostra já está enviesada porque os não-proprietários de carros não estão lá.
A Armadilha: Por que "Corrigir" Pode Piorar as Coisas
O principal aviso do artigo é sobre o que acontece quando pesquisadores tentam corrigir o "Problema da Máscara" sem pensar no "Problema da Seleção de Modo".
A Correção Ingênua:
Se você notar que as pessoas no site dizem "Não" para vegetais e as pessoas no telefone dizem "Sim", um pesquisador pode pensar: "Ok, vou apenas separar os dados e compará-los". Ou, "Vou apenas adicionar uma caixa de 'modo' à minha equação matemática para cancelar a diferença".
A Armadilha (Viés de Colisor):
Os autores dizem que isso é perigoso se o tipo de pessoa (por exemplo, idade ou escolaridade) influenciou tanto qual método ela escolheu QUANTO o que ela respondeu.
Pense nisso como um segurança de boate:
- O "Segurança" é o Modo da Pesquisa (Website vs. Telefone).
- Os "VIPs" são as pessoas que escolheram o website (talvez sejam mais jovens).
- Os "Regulares" são as pessoas que escolheram o telefone (talvez sejam mais velhas).
Se você tentar "corrigir" os dados forçando os VIPs e os Regulares a serem comparados diretamente, você pode acidentalmente criar um link falso entre coisas que não estão relacionadas.
O Aviso do Artigo:
Se você tentar "controlar pelo" modo da pesquisa (separando os dados ou ajustando a matemática) quando as próprias pessoas escolheram o modo com base em suas características, você pode acidentalmente criar uma conexão falsa entre seus dados. É como olhar para um grupo de pessoas que todos possuem carros vermelhos e todos gostam de pizza, e concluir que "Carros vermelhos causam amor por pizza", quando na verdade, as pessoas que gostam de ambos os itens apenas aconteceram de escolher o clube do carro vermelho.
O artigo usa fluxogramas (DAGs) para mostrar que:
- Se o modo da pesquisa é apenas uma "máscara" (afeta a resposta, mas não é escolhido pelas características da pessoa), você pode corrigir isso separando os modos.
- Se o modo da pesquisa é um "segurança" (escolhido pelas características da pessoa), tentar corrigir isso separando os modos na verdade cria novos erros (chamados de Viés de Colisor).
O Que os Pesquisadores Devem Fazer?
O artigo sugere três maneiras de lidar com isso, dependendo da situação:
- Não toque nisso (Condicionamento): Se você tem certeza de que as pessoas não escolheram o modo com base em suas características, você pode simplesmente separar os dados por modo. Mas se elas escolheram, não faça isso!
- Adivinhar e Preencher (Imputação): Você poderia tentar adivinhar o que as "pessoas do website" teriam dito se tivessem usado o "método do telefone" e preencher as lacunas. O artigo avisa que isso é arriscado porque assume que os dados ausentes são aleatórios, o que geralmente não são. É como tentar adivinhar a resposta de um amigo para uma pergunta que não lhe foi feita, assumindo que ele responderia como todos os outros.
- O Jogo do "E Se" (Análise de Viés Quantitativo): Este é o método que os autores mais recomendam. Em vez de tentar magicamente corrigir os dados, você admite que os dados estão bagunçados. Você diz: "Ok, vamos assumir que o efeito de modo foi deste tamanho. Como isso mudaria nossos resultados?". Então, você testa um tamanho diferente. Se sua conclusão principal permanecer a mesma, não importa o quão grande você assuma que o erro seja, você pode estar confiante em seus achados.
A Conclusão
Quando você mistura diferentes formas de coletar dados de pesquisa (como telefone, web e papel), você precisa ter cuidado.
- O Método importa: Ele muda como as pessoas respondem (A Máscara).
- As Pessoas importam: Diferentes pessoas escolhem diferentes métodos (O Segurança).
Se você tentar corrigir o problema da "Máscara" sem perceber que o "Segurança" está presente, você pode acidentalmente inventar uma história falsa. A melhor abordagem é mapear suas suposições (usando esses fluxogramas), reconhecer que nem sempre você pode corrigir os dados perfeitamente e, em vez disso, testar o quanto seus resultados mudariam se os erros fossem maiores ou menores.
Afogado em artigos na sua área?
Receba digests diários dos artigos mais recentes que correspondam às suas palavras-chave de pesquisa — com resumos técnicos, no seu idioma.