Utilización conjunta de encuestas administradas y autoadministradas. ¿Proporcionan resultados similares?

Vidal Díaz de Rada

doi:10.22325/fes/res.2021.09

Autores/as

Vidal Díaz de Rada I-COMMUNITAS. Institute for Advanced Social Research, Universidad Pública de Navarra http://orcid.org/0000-0002-9638-3741

DOI:

https://doi.org/10.22325/fes/res.2021.09

Palabras clave:

modos mixtos, encuestas presenciales, encuestas telefónicas, encuestas autoadministradas, encuestas web, calidad de la respuesta.

Resumen

El objetivo de este trabajo es conocer hasta qué punto la utilización secuencial de modos autoadministrados y administrados (encuesta telefónica y presencial) producen cambios en las preguntas (de contenido) de un cuestionario. Se utiliza una encuesta sobre hábitos lingüísticos realizada en una región bilingüe española. Una encuesta autoadministrada online aplicada a toda la muestra consigue una colaboración del 44,3% de la muestra. Las personas que no han respondido son contactadas con encuestas administradas (telefónica y presencial). El modo autoadministrado online, como se esperaba, presenta una mayor utilización de la lengua de la comunidad. Ahora bien, cuando se considera los factores que más influyen en esta respuesta se aprecia que las variables sociodemográficas y el lugar de nacimiento presentan más influencia que el modo de administración utilizado.

Biografía del autor/a

Vidal Díaz de Rada , I-COMMUNITAS. Institute for Advanced Social Research, Universidad Pública de Navarra

Catedrático de Sociología de la Universidad Pública de Navarra, donde es profesor desde el año 1994. Licenciado y Doctor en Sociología, y Licenciado en Investigación y Técnicas de Mercado. Su especialidad es la medición y el análisis de la realidad social, habiendo impartido más de sesenta cursos sobre esta materia en empresas privadas e instituciones públicas. Autor de más de un centenar de artículos en revistas científicas y 25 libros, la mayor parte sobre sociología del consumo y metodología. Dentro de ésta última sus líneas de trabajo se centran en la /calidad de la encuesta/, mejora del /cuestionario/, /trabajo de campo/y reducción de /no respuesta/, /modos de recogida de información/, y /análisis de datos/. Entre sus últimas publicaciones destacan: “Internet como modo de administración de encuestas” (CIS, 2019), “¿Influye en la respuesta el orden de administración de escalas valorativas 0-10?” (REIS, 2019), y “Calidad de respuesta y modo de administración del cuestionario” (RIS, 2019). La mayor parte de esas publicaciones son
fruto de la participación en más de medio centenar de proyectos de investigación.

Citas

Asociación Española de Estudios de Mercado, Marketing y Opinión. (2006). El sector de la investigación de mercados en España 2005. Recuperado de https://www.aedemo.es/investigamos/estudio-sector/

Asociación Española de Estudios de Mercado, Marketing y Opinión. (2011). El sector de la investigación de mercados también refleja la situación económica actual.

Asociación Nacional de Empresas de Investigación de Mercados y Opinión Pública, Asociación Española de Estudios de Mercado, Marketing y Opinión, y Sociedad Europea de Opinión e Investigación de Mercados. (2016). El sector de la investigación de mercados en España 2015. Recuperado de http://www.aneimo.com/datosmercado.php.

Asociación Nacional de Empresas de Investigación de Mercados y Opinión Pública, Asociación Española de Estudios de Mercado, Marketing y Opinión, y Sociedad Europea de Opinión e Investigación de Mercados. (19 de octubre de 2018). X encuentro: la investigación a análisis. 2017: estabilidad en el sector de la investigación de mercados mundial. Recuperado de https://www.aedemo.es/producto/presentacion-del-estudio-de-la-industria/

Battaglia, M. P., Frankel, M. R., Osborn, L., Mokdad, A. y Link, M. W. (2008). A comparison of address-based sampling (ABS) versus random-digit dialing (RDD) for General Population Surveys. Public Opinion Quarterly, 72(1), 6-27.

Battaglia, M. P., Link, M. W., Frankel, M. R., Osborn, L. y Mokdad A. (2008). An evaluation of respondent selection methods for household mail surveys. Public Opinion Quarterly, 72(3), 459-469. https://doi.org/10.1093/poq/nfn026

Beullens, K., Loosveldt, G., Vandenplas, C. y Stoop, I. (2018). Response rates in The European Social Survey: Increasing, decreasing, or a matter of fieldwork efforts”. Survey Methods: Insights from the Field. Recuperado de https://surveyinsights.org/?p=9673

Biblioteca Técnica de Política Lingüística. (2018): Análisi de l’Enquesta d’usos lingüístics de la població 2013: Coneixements, usos, transmissió i actituds lingüístics (Vol. 1). Barcelona: Generalitat de Catalunya, Departament de Cultura. Recuperado de https://llengua.gencat.cat/web/.content/documents/publicacions/btpl/arxius/23_EULP_Catalunya_2013-vol.1.pdf

Billiet, J. y Matsuo, H. (2012). Non-response and measurement error. En L. Gideon (ed.), Handbook of survey methodology for the social sciences (pp. 149-178). Nueva York: Springer.

Couper, M. P. (2008). Technology and the survey interview/questionnaire. En F. G. Conrad y M. F. Schober (eds.), Envisioning the survey interviewing of the future (pp. 31-76). Nueva York: Wiley.

Couper, M. P. (2011). The future of modes of data collection. Public Opinion Quarterly, 75, 889-908. https://doi.org/10.1093/poq/nfr046

Couper, M. P. (2017). New Developments in Survey Data Collection. Annual Review of Sociology, 43, 121-145. https://doi.org/10.1146/annurev-soc-060116-053613

Daikeler, J., Bosnjak, M. y Lozar Manfreda, K. (2020). Web versus other survey modes: An updated and extended meta-analysis comparing response rates. Journal of Survey Statistics and Methodology, 8(3), 513-539. https://doi.org/10.1093/jssam/smz008

DeLeeuw, E. D. (2018). Mixed-Mode: Past, Present, and Future. Survey Research Methods, 12(2), 75-89. https://doi.org/10.18148/srm/2018.v12i2.7402

Díaz de Rada, V., Domínguez, J. A. y Pasadas, S. (2019). Internet como modo de administración de encuestas. Madrid: CIS.

Díaz de Rada, V. y Núñez, A. (2008). Estudio de las incidencias en la investigación con encuestas. Madrid: CIS.

Díaz de Rada, V. y Portilla, I. (2015). Encuestas telefónicas: estrategias para mejorar la colaboración. Perspectiva Empresarial, 2(1), 97-115. http://dx.doi.org/10.16967%2Frpe.v2n1a7

Dillman, D. (2017). The promise and challenge of pushing respondents to the Web in mixed-mode. Survey Methodology, 43(1), 3-30.

Dillman, D. A., Smyth, J. D. y Christian, L. M. (2009). Internet, Mail and Mixed-Mode Surveys: The Tailored Design Method (3th ed.). Nueva York: Wiley.

Escobar, M.; Fernández Macías, E. y Bernardi, F (2009). Análisis de datos con STATA. Madrid: CIS.

ESOMAR (2008), 26 Questions to Help Buyers of Online Samples. Amsterdam: ESOMAR, http://www.esomar.org/index.php/26-questions.html

Fowler, F. J., Roman, A. M., Mahmood, R. y Cosenza, C. A. (2016). Reducing Nonresponse and Nonresponse Error in a Telephone Survey: An Informative Case Study. Journal of Survey Statistics and Methodology, 4(2), 246-262. https://doi.org/10.1093/jssam/smw004

Groves, R. M. (1990). Theories and methods of telephone surveys. Annual Review of Sociology, 16, 221-240. https://doi.org/10.1146/annurev.so.16.080190.001253

Groves, R. M. (2011). Three Eras of Survey Research. Public Opinion Quarterly, 75(5), 861-871. https://doi.org/10.1093/poq/nfr057

Groves, R. M. y Mathiowetz, N. A. (1984). Computer Assisted Telephone Interviewing: Effects on interviewers and respondents. Public Opinion Quarterly, 48(4), 356-369. https://doi.org/10.1093/poq/48.1b.356

Haan, M., Ongena, Y. P. y Aarts, K. (2014). Reaching Hard-to-Survey Populations: Mode Choice and Mode Preference. Journal of Official Statistics, 30(2), 355-379. http://dx.doi.org/10.2478/jos-2014-0021

Hochstim, J. R. (1967). A critical comparison of three strategies of collecting data from households. Evaluation Journal of the American Statistical Association, 62, 976-989.

Insights y Analytics España. (2019). XI Encuentro: la investigación a análisis. Datos para España y mundiales de Investigación de Mercados 2018. Recuperado de http://ia-espana.es/index.php/notas-de-prensa/

Institut d'Estadística de Catalunya-Idescat (2015). Enquesta d’usos lingüístics de la població 2013, Barcelona; Generalitat de Catalunya, Departament de Cultura, Direcció General de Política Lingüística, https://www.idescat.cat/cat/idescat/publicacions/cataleg/pdfdocs/eulp2013.pdf, acceso 8 de enero de 2019.

Kappelhof, J. y DeLeeuw, E. D. (2019). Estimating the Impact of Measurement Differences Introduced by Efforts to Reach a Balanced Response among Non-Western Minorities. Sociological Methods & Research, 48(1), 116-155. https://doi.org/10.1177/0049124117701474

Lee, H., Kim, S., Couper, M. y Woo, Y. (2019). Experimental Comparison of PC Web, Smartphone Web, and Telephone Surveys in the New Technology Era. Social Science Computer Review, 37, 234-247. https://doi.org/10.1177/0894439318756867

Lyberg, L. E. y Kasprzyk, D. (1991). Data collection methods and measurement error: an overview. En P. P. Biemer, R. Groves, L. Lyberg, N. Mathiowetz y S. Sudman (eds.), Measurement error in surveys (pp. 237-257). Nueva York: Wiley.

Lynn, P., Hope, S. y Jäcke, A. (octubre, 2012). Effects of Visual and Aural Communication of Categorical Response Options on Answers to Survey Questions. Working Papers Institute for Social and Economic Research, 2012-2.

Masats, M.; Oller, E. y Torras, C. (2018). Metodologia general de l’Enquesta d’usos linguistics de la població 2013. En Biblioteca Técnica de Política Lingüística. (2018): Análisi de l’Enquesta d’usos lingüístics de la població 2013: Coneixements, usos, transmissió i actituds lingüístics (Vol. 1). Barcelona: Generalitat de Catalunya, Departament de Cultura. Recuperado de https://llengua.gencat.cat/web/.content/documents/publicacions/btpl/arxius/23_EULP_Catalunya_2013-vol.1.pdf

Massey, D. S. y Tourangeau, R. (2013). Introduction: New challenges to social measurement. The ANNALS of the American Academy of Political and Social Science, 645(1), 6-22. https://doi.org/10.1177/0002716212463314

National Research Council. (2013). Nonresponse in social science surveys: A research agenda. Washington, DC: The National Academic Press.

Nathan, G. (2001). Telesurvey methodologies for household surveys – A review and some thoughts for the future?. Survey Methodology, 27(1), 7-31.

Olson, K., Smyth J. D. y Wood, H. (2012). Does Giving People Their Preferred Survey Mode Actually Increase Survey Participation? An Experimental Examination. Public Opinion Quarterly, 74(4), 611-635. https://doi.org/10.1093/poq/nfs024

Sala, E. y Lynn, P. (2009). The potential of a multi-mode data collection design to reduce non response bias. The case of a survey of employees. Quality and Quantity, 43, 123-136. https://doi.org/10.1007/s11135-007-9148-5

Schober, M. F. y Conrad, F. G. (2008). Survey interviews and new communication technologies. En F. G. Conrad y M. F. Schober (eds.), Envisioning the survey interviewing of the future (pp. 1-30). Nueva York: Wiley.

Smith, T. W. y Kim, J. (2015). A Review of Survey Data-Collection Modes. Sociological Theory and Methods, 30(2), 185-200.

Smyth, J. (18 de septiembre de 2018). Visual Design in Surveys: Using Numbers, Symbols, and Graphi. Webinar de la Asociación Americana para la Investigación de la Opinión Pública (American Association for Public Opinion Research).

Smyth, J. D., Olson, K. y Kasabian, A. (2014). The Effect of Answering in a Preferred Versus a Non-Preferred Survey Mode on Measurement. Survey Research Methods, 8(3), 137-152. https://doi.org/10.18148/srm/2014.v8i3.5750

Sociedad Europea de Opinión e Investigación de Mercados. (2008). 26 Questions to Help Buyers of Online Samples. Ámsterdam: ESOMAR. Recuperado de http://www.esomar.org/index.php/26-questions.html

Stange, M., Barry, A., Smyth, J. D. y Olson, K. (2106). Effects of Smiley Face Scales on Visual Processing of Satisfaction Questions in Web Surveys. Social Science Computer Review, 36(3), 756-766. https://doi.org/10.1177/0894439316674166

Stoop, I. (2005). The Hunt for the Last Respondent. Non-Response in Sample Surveys. The Hague: Social and Cultural Planning Agency.

Stoop, I. (2007). No time, Too Busy: Time Strain and Survey Cooperation. En G. Loosveldt, M. Swyngedouw y B. Cambré (eds.), Measuring Meaningful Data in Social Research (pp. 301-314). Leuven: Acco.

Thornberry, O. T. y Massey, J. T. (1988). International comparison of telephone coverage. En R. M. Groves, P. P. Biemer, L. E. Lyberg, J. T. Massey, W. L. Nicholls II y J. Waksberg (eds.), Telephone Survey Methodology (pp. 24-49). Nueva York: Wiley,

Tourangeau, R., Conrad, F. G. y Couper, M. P. (2013). The Science of Web Surveys. Oxford: Oxford University Press.

Trewin, D. y Lee, G. (1988). International comparison of telephone coverage. En R. M. Groves, P. P. Biemer, L. E. Lyberg, J. T. Massey, W. L. Nicholls II y J. Waksberg (eds.), Telephone Survey Methodology (pp. 9-24). Nueva York: Wiley.