Expert validation of the questionnaire “children and participation”

  • Marta Sabariego Puig, Sra. Profesora Titular de Universidad.Departamento de Mètodes d’Investigació i Diagnòstic en Educació (MIDE). Facultat d’Educació. Universidad de Barcelona. Passeig de la Vall d’Hebron, 171 (08035)-Barcelona. Edifici de Llevant, 2ª Planta, Despacho 202. Tel.: (0034) 93.403.50.10 http://orcid.org/0000-0003-3826-299X
  • Alberto Alberto Izquierdo-Montero., Sr. Personal Investigador en Formación en Dpto. de Métodos de Investigación y Diagnóstico en Educación I (MIDE I), Facultad de Educación, UNED. Calle Juan del Rosal, 14. 28040. Madrid https://orcid.org/0000-0002-1146-9299
  • Antonio Ruiz Bueno, Sr. Profesor asociado del Departamento de métodos de investigación y diagnóstico en educación de la Universidad de Barcelona. Facultad de Educación. Universidad de Barcelona. Passeig de la Vall d’Hebron, 171, 08035 Barcelona. Tel: (0034) 93.403.52.19. http://orcid.org/0000-0001-9651-3633
  • Elena Noguera Pigem, Sra. Profesora col·laboradora permanente (doctora) en el Departamento de Teoria e Historia de la Educación de la Universidad de Barcelona https://orcid.org/0000-0001-8488-7590
Keywords: questionnaire; validity; participation; childhood; youth

Abstract

This article presents the study of the reliability and validity of the questionnaire "Childhood and Participation" designed within the framework of an ongoing research to census the forms of participation identified in the municipalities that are part of the network of Ciudades Amigas de la Infancia and/or to Asociación Internacional de Ciudades Educadoras. The questionnaire (in its dual version, one for technical figures and the other for elected officials from the municipal context) made it possible to describe the elements and characteristic practices (conceptual, functional, organizational and operational references) linked to the exercise of child citizenship at the local level. First, it presents the theoretical foundation and the model of participation from which it is based, from which the objectives, content, and internal structure of the instrument are specified. Below, the procedure followed to design, verify and establish the validation of the questionnaire in a participatory process structured in 3 phases, taking as a criterion the temporality of the procedure: the construction of the initial version; verification and validation (pilot test) and, finally, post-validation by the framework project research team. The procedural aspects and the results obtained from the point of view of the ecological validity of the questionnaire, the reliability as a concordance of criteria between researchers and participants, are offered by means of the coefficient of "Kappa de Fleiss", and the assessment of both metric qualities, as a validity of judgment, once the final version has been administered. The usefulness and interest of this instrument in research aimed at analyzing the state of children's participation in municipalities is confirmed.

Author Biographies

Marta Sabariego Puig, Sra., Profesora Titular de Universidad.Departamento de Mètodes d’Investigació i Diagnòstic en Educació (MIDE). Facultat d’Educació. Universidad de Barcelona. Passeig de la Vall d’Hebron, 171 (08035)-Barcelona. Edifici de Llevant, 2ª Planta, Despacho 202. Tel.: (0034) 93.403.50.10

Profesora titular de Universidad del Departamento de Métodos de Investigación y Diagnóstico en Educación de la Facultad de Educación de la Universidad de Barcelona. Miembro del GREDI- UB-URV Grupo de Investigación en Educación Intercultural (2017SGR00298). Su trayectoria investigadora se ha desarrollado vinculada a proyectos competitivos sobre el diálogo intercultural, la participación juvenil y la construcción de una ciudadanía activa e inclusiva en el ámbito educativo formal y en espacios socioeducativos, mediante el desarrollo de metodologías de carácter cualitativo y desde el enfoque de la investigación participativa. También es destacable la coordinación de proyectos de innovación e investigación en docencia universitaria, centrados en las metodologías narrativas, la investigación formativa y el pensamiento reflexivo, así como su participación en proyectos sobre formación y desarrollo profesional del profesorado.

 

Alberto Alberto Izquierdo-Montero., Sr., Personal Investigador en Formación en Dpto. de Métodos de Investigación y Diagnóstico en Educación I (MIDE I), Facultad de Educación, UNED. Calle Juan del Rosal, 14. 28040. Madrid

Licenciado en Pedagogía (UCM) y Máster en Intervención Educativa en Contextos Sociales, especialidad en menores y jóvenes en dificultad social (UNED). Actualmente, realiza su tesis doctoral con un contrato FPI en la Línea 4-Estudios Interculturales en Educación del Programa de Doctorado en Educación de la UNED. Además, participa en diversos proyectos de innovación docente e investigación, entre los que se encuentra el Proyecto “Infancia y participación. Diagnóstico y propuestas para una ciudadanía activa e inclusiva en la comunidad, las instituciones y la gobernanza" (RTI2018-098821-B-I00). Anteriormente ha trabajado como educador en distintos escenarios socioeducativos (pisos de protección, concejalías de juventud...) en la periferia sur de Madrid.

Antonio Ruiz Bueno, Sr., Profesor asociado del Departamento de métodos de investigación y diagnóstico en educación de la Universidad de Barcelona. Facultad de Educación. Universidad de Barcelona. Passeig de la Vall d’Hebron, 171, 08035 Barcelona. Tel: (0034) 93.403.52.19.

Licenciado en grado en Filosofía y Letras (Sección Psicología) por la Universidad Autónoma de Barcelona. La trayectoria científica se ha concretado en la especialización en el asesoramiento a Instituciones sobre el diseño, ejecución y análisis de investigaciones, lo que ha comportado el trabajar con multitud de técnicas metodológicas tanto a nivel cuantitativo como cualitativo. Otra área de interés se sitúa en los avances metodológicos y sus aproximaciones teóricas sobre la docencia desde la perspectiva del alumno, y en concreto, respecto a su aprendizaje significativo, entendido éste desde una visión global del proceso de enseñanza y aprendizaje.

Elena Noguera Pigem, Sra., Profesora col·laboradora permanente (doctora) en el Departamento de Teoria e Historia de la Educación de la Universidad de Barcelona

Doctorada en Filosofía y Ciencias de la Educación (Ciencias de la Educación)  Universidad de Barcelona. Experiencia científica y professional vinculada a proyectos de investigación sobre participación y a coordinación de proyectos telemáticos Internacionales. Docente en el Grado de Pedagogía y en el Máster de Entornos de enseñanza y aprendizaje con tecnologías digitales. Coordinadora del Prácticum de Pedagogía. Miembro del GREM (Grupo de Investigación en Educación Moral), del Grupo de innovación docente Innova.the y Praxis, de la red iEARN (International Education and Resource Network) y del Consejo asesor de la Revista Perspectiva Escolar de la Asociación de maestros Rosa Sensat. 

References

Ander-Egg, E. (1997). Métodos del Trabajo social. Buenos Aires: Espacio Editorial.

Autores/as. (2020). Informe de resultados anonimizado para revisión por pares.

Bronfenbrenner, U. (1977). Toward an experimental ecology of human development. American Psychologist, 32, 513–531. https://doi.org/10.1037/0003-066X.32.7.513.

Caillaud, S., & Flick, U. (2016). Triangulation méthodelogique, ou comment penser son plan de recherche. In G. Lo Monaco, S. Delouvée, & P. Rateau (Eds.), Les represéntatios sociales. Théories, méthodes et applications (pp. 227–237). Louvain-La-Neuve: De Boeck Supérieur SA

Cano Hila, A. B., Sabariego, M. & Ruiz, A. (2018). Youth participation in Spanish urban periphery: its concept, spheres and conditioning factors. Youth Voice Journal,8, 1-30 http://hdl.handle.net/2445/133440

Cohen, L., Manion, L., & Morrison, K. (2018). Research methods in education. New York: Routledge, Taylor & Francis Group.

Delgado_Alvarez, C. (2014). Viajando a Ítaca por mares cuantitativos. Manual de ruta para investigar en grado y posgrado. Salamanca: Amarú

Dixon, J., Ward, J. & Blower, S. (2019). “They sat and actually listened to what we think about the care system”: the use of participation, consultation, peer research and co-production to raise the voices of young people in and leaving care in England. Child Care in Practice, 25(1), 6-21. https://doi.org/10.1080/13575279.2018.1521380.

Esteban, M. B., & Novella, A. (2018). Jóvenes, participación democracia: retos propositivos expuestos por la juventud. RELAPAE, (9), 110-124. https://bit.ly/3d7sjbn

Esteban, M. B., Crespo, F., Novella, A. M., & Sabariego, M. (2021). Aportes reflexivos para la investigación con las infancias. Corresponsabilidad en el avance de su participación, Sociedad e Infancias, 5(nº especial), 21-33.

Flanagan, C.A. (2013). Teenage citizens: The political theories of the Young. Cambridge: Harvard University Press.

Fleiss, J. L., Levin, B., & Paik, M. C. (2003). Statistical Methods for Rates and Proportions (3rd ed.). New Jersey: John Wiley & Sons, Inc.

Gadamer, H. G. (1977). Verdad y método. Salamanca: Sígueme.

Gallagher, M. (2008). Foucault, power and participation. The International Journal of Children’s Rights, 16(3), 395-406.

García, S. (2002). La Validez y la Confiabilidad en la Evaluación del Aprendizaje desde la Perspectiva Hermenéutica. Revista de Pedagogía, 23(67), 297-318. https://bit.ly/2PyrHTT

Garson, D. (2013). Validity and Reliability. Asheboro: Statistical Publishing Associates.

Gwet, K. L. (2014). Handbook of inter-rater reliability (4th ed.). Gaithersburg: Advanced Analytics.

Hernández, R., Fernández, C., & Baptista, M. del P. (2014). Metodología de la investigación. Ciudad de México: Mac Graw-Hill Interamericana Editores.

Krippendorff, K. (2013). Content analysis. An introduction to its methodology. London: SAGE Publications.

Lay, S. L., & Montañés, M. (2013). Las representaciones sociales del mundo adulto sobre la infancia y la participación infantil. Salud y Sociedad, 4(3), 304-316.

López, P., & Fachelli, S. (2015). Metodología de la Investigación Social Cuantitativa. Cerdanyola del Vallès: Bellaterra. https://doi.org/10.1344/reyd2018.17.13

Lundy, L., & McEvoy, L. (2012). Children’s rights and research processes: Assisting children to (in)formed views. Childhood, 19(1), 129-144. https://doi.org/10.1177/0907568211409078Martínez, M. (2004). Ciencia y arte en la metodología cualitativa. Ciudad de México: Trillas.

Mata, P. (2011). Ciudadanía ética, crítica, participativa y transformadora: propuestas educativas desde el enfoque intercultural. Universidad Nacional de Educación a Distancia (UNED). Retrieved from https://bit.ly/2PJszW8

Mateos, A., Vaquero, E., Urrea, A., y Parra, B. (2020). Contar con la infancia en situación de riesgo en los procesos de investigación: pasos hacia la coproducción. Sociedad e Infancias, (4), 87-98.

McCready y Dilworth (2014). Youth Participation. Literature Review 2014. Northern Ireland: Youthaction.

Novella, A. M. (2012). La participación infantil: concepto dimensional en pro de la autonomía ciudadana. Revista Teoría de la Educación: Educación y Cultura en la Sociedad de la Información, 13(2), 380-403.

Novella, A. M., Agud, I., Llena, A., & Trilla, J. (2013). The concept of citizenship constructed by youths who experienced childhood participation. Bordon, 65(3), 93-108.

Parrilla, A. (2010). Ética para una investigación inclusiva. Revista de educación inclusiva, 3(1), 165-174.

Pérez, G. (1994). Investigación cualitativa. Retos e interrogantes. Madrid: Iberoamérica.

Pozo, J.M. (2014). Educacionari. Barcelona: Edicions 62.

Rojas, S, Haya, I., & Lázaro, S. (2012). La voz del alumnado en la mejora escolar: niños y niñas como investigadores en Educación Primaria. Revista de Educación, (359),, 81-101.

Ruiz, A. (2015). Fiabilidad y Validez: Conceptualización y procedimientos de cálculo con Spss. Universitat de Barcelona. Recuperado de: https://bit.ly/3r99IRn

Shier, H. (2019). An analytical tool to help researchers develop partnerships with children and adolescents. In I. Berson, M. Berson, C. Gray (eds), Participatory Methodologies to Elevate Children’s Voice and Agency (pp. 295-316). Charlotte: Information Age Publishing.

Subirats, J. (2015). ¿Nueva Política? Argumentos a favor y dudas razonable. En A. Blanco, A. Chueca, y G. Bombardieri (Eds.), Informe España 2015 (pp. 446–464). Madrid: Fundación Encuentro.

Susinos, T., & Ceballos, N. (2012). Voz del alumnado y presencia participativa en la vida escolar. Apuntes para una cartografía de la voz del alumnado en la mejora educativa. Revista de Educacion, (359), 24-44. https://doi: 10.4438/1988-592X-RE-2012-359-194

Terrén, M., & Sales, A. (2016). Establecimiento de Normas de Aula para Favorecer la Voz del Alumnado: Estudio de Caso Español. Revista latinoamericana de educación inclusiva, 10(2), 151-166.

Zumbo, B.D. (2007). Validity: Foundational Issues and Statistical Methodology. In C.R. Rao & S. Sinharay (Eds.) Handbook of Statistics, Vol. 26: Psychometrics, (pp. 45-79). The Netherlands: Elsevier Science B.V.

Published
2021-07-29