Survey Mode Effects in a Developing Country: Comparing Phone and Face-to-Face Surveys in Costa Rica

• Lupu, Noam ^[1] ; Wolsky, Adam ^[2]
  1. [1] Vanderbilt University

     Vanderbilt University

     Estados Unidos

     
  2. [2] Princeton University

     Princeton University

     Estados Unidos

     
• Localización: Revista Latinoamericana de Opinión Pública, ISSN-e 2660-700X, ISSN 1852-9003, Vol. 11, Nº. 2, 2022, págs. 109-132
• Idioma: inglés
• Títulos paralelos:
  • Efeitos do modo de pesquisa em um país em desenvolvimento: Comparando pesquisas por telefone e face a face na Costa Rica
  • Efectos del modo de encuesta en un país en desarrollo: Comparando encuestas telefónicas y presenciales en Costa Rica
• Enlaces
  • Texto completo
• Resumen
  • español

    Las respuestas a las encuestas telefónicas generalmente generan tasas más altas de sesgo de deseabilidad social y respuestas extremas en comparación con las encuestas cara a cara. Sin embargo, los estudios de los efectos de modo generalmente comparan estudios representativos que asumen una comparabilidad implausible o estudios experimentales que se basan en muestras de conveniencia. Nuestro estudio compara dos muestras probabilísticas nacionales, pero utiliza matching para abordar la comparabilidad. Estudiamos el caso de Costa Rica, una democracia de ingresos medios, para ver si la sabiduría convencional extraída de Europa Occidental y América del Norte se extiende al Sur Global. Analizamos dos encuestas nacionales representativas, una realizada por teléfono y la otra cara a cara, lo que nos permite comparar preguntas idénticas que colocamos en ambos cuestionarios. Encontramos que los encuestados por teléfono tienden más a dar la respuesta más socialmente deseable y a elegir valores extremos negativos en preguntas con escalas. Esto sugiere que los investigadores de encuestas y los profesionales deberían evaluar cuidadosamente las ventajas y desventajas de un cambio de modo o del uso de modos mixtos.

  • English

      Responses to phone surveys tend to exhibit higher rates of social desirability bias and extreme responses when compared to face-to-face surveys. Yet, studies of mode effects typically compare either representative studies that implausibly assume comparability or experimental studies that rely on convenience samples. Our study compares two national probability samples but uses matching to address comparability. We study Costa Rica, a middle-income democracy, to see whether the conventional wisdom drawn from Western Europe and North America extends to the Global South. We analyze two nationally representative surveys, one fielded by phone and one face-to-face, allowing us to compare identically worded items we placed on both surveys. We find that phone respondents exhibited more socially desirable responding and were more likely to choose negative endpoints on scalar items. This suggests that survey researchers and practitioners should carefully assess the tradeoffs in shifting modes or employing mixed modes.

  • português

    As respostas a pesquisas por telefone geralmente geram taxas mais altas de viés de desejabilidade social e respostas extremas em comparação com pesquisas face a face. No entanto, estudos de efeitos do modo geralmente comparam estudos representativos que assumem comparabilidade implausível ou estudos experimentais baseados em amostras de conveniência. Nosso estudo compara duas amostras probabilísticas nacionais, mas usa matching para abordar a comparabilidade. Estudamos o caso da Costa Rica, uma democracia de renda média, para ver se a sabedoria convencional adquirida na Europa Ocidental e na América do Norte se estende ao Sul Global. Analisamos duas pesquisas nacionais representativas, uma realizada por telefone e outra face a face, permitindo-nos comparar perguntas idênticas que colocamos em ambos os questionários. Descobrimos que os entrevistados por telefone eram mais propensos a dar a resposta socialmente desejável e a escolher valores extremos negativos para perguntas com escalas. Isso sugere que pesquisadores e profissionais de pesquisa devem pesar cuidadosamente as vantagens e desvantagens de alternar modos ou usar modos mistos.