Elaboración, validez de contenido y fiabilidad del instrumento de observación SOCTOD-BSR para el análi-sis de acciones en baloncesto en silla de ruedas (Development, content validity and reliability of the SOCTOD-BSR observation instrument for analysing actions in wheelchair basketball)
DOI:
https://doi.org/10.47197/retos.v49.97908Palabras clave:
validación, fiabilidad, metodología observacional, clasificación funcional, formaciones.Resumen
Antecedentes: esta investigación pretendía crear un instrumento de observación para estudiar las acciones del baloncesto en silla de ruedas (BSR) en función de la clasificación funcional de este deporte, así como evaluar sus propiedades psicométricas de validez y fiabilidad. Metodología: utilizando la metodología observacional, se elaboró un instrumento de observación ad hoc (SOCTOD-BSR) mediante la observación y el registro de 34 criterios y 216 categorías identificados como factores de rendimiento. Para registrar y codificar las unidades de observación, se empleó el software LINCE® v.1.4, mientras que, para recodificar los datos, se utilizó LibreOffice v.6.1.1. Se analizaron nueve partidos del Campeonato del Mundo 2014 de BSR, derivándose un total de 1800 unidades de observación en las que se determinaron los comportamientos tácticos ofensivos y defensivos. La validación de contenido se basó en el juicio de expertos y se aceptaron los valores de V de Aiken ≥ .70 con un intervalo de confianza del 95%. Para el cálculo de la fiabilidad se aplicó la teoría de la generalizabilidad y el coeficiente Kappa de Cohen. Resultados: se obtuvo un coeficiente V de Aiken de .81 para la validez de contenido por criterio de jueces. La fiabilidad fue excelente, con coeficientes relativos a la heterogeneidad del instrumento y de las pruebas inter e intraobservador de 1 y .98, respectivamente. Conclusiones: el instrumento de observación es válido y fiable para analizar acciones de BSR.
Palabras clave: propiedades psicométricas, metodología observacional, clasificación funcional, formaciones, paradeporte.
Abstract. Background: this study aimed to develop an observational tool for analyzing wheelchair basketball (WB) actions based on the sport’s functional classification, while also assessing its validity and reliability psychometric properties. Methods: utilizing observational methodology, an ad hoc observation instrument (SOCTOD-BSR) was created by observing and documenting 34 criteria and 217 categories identified as performance factors. LINCE® v.1.4 software was employed for recording and encoding observation units, and data recoding was conducted with LibreOffice v.6.1.1. Nine games from the 2014 WB World Championship were analyzed, resulting in a total of 1800 observation units where offensive and defensive tactical behaviors were determined. Content validity was established through expert judgment, and Aiken’s V values ≥ .70 with a 95% confidence interval were accepted. Generalizability theory and Cohen’s Kappa coefficient were applied to calculate reliability. Results: concerning content validity based on judges’ criteria, an Aiken's V coefficient of .81 was achieved. Reliability was excellent, with coefficients for instrument heterogeneity, and inter- and intra-observer tests at 1 and .98, respectively. Conclusions: the observation instrument is valid and reliable for analyzing WB actions.
Keywords: psychometric properties, observational methodology, functional classification, line-up formations, parasport.
Citas
Aiken, L. R. (1980). Content Validity and Reliability of Single Items or Questionnaires. Educational and Psychological Measurement, 40(4), 955-959. https://doi.org/10.1177/001316448004000419
Aiken, L. R. (1985). Three Coefficients for Analyzing the Reliability and Validity of Ratings. Educational and Psychological Measurement, 45(1), 131-142. https://doi.org/10.1177/0013164485451012
Altman, D. G. (1990). Practical Statistics for Medical Research. En Practical Statistics for Medical Research (1.a ed.). Chapman and Hall/CRC. https://doi.org/10.1201/9780429258589
Álvarez, A., Ortega, E., Gómez-Ruano, M. Á., & Salado, J. (2009). Study of the defensive performance indicators in peak performance basketball. Revista de Psicología del Deporte, 18(suppl), 379-384.
Álvaro, J., Dorado, A., González-Badillo, J. J., González, J. L., Navarro, F., Molina, J. J., … Sánchez, F. (1996). Modelo de análisis de los deportes colectivos basado en el rendimiento en competición. INFOCOES, 7, 21-41.
Anguera, M. T., & Blanco, Á. (2003). Registro y codificación en el comportamiento deportivo. En Psicología del Deporte (Vol. 2). Metodología (pp. 35-73). Buenos Aires, Argentina: Efdeportes.
Anguera, M. T., Blanco, Á., Hernández-Mendo, A., & Losada, J. L. (2011). Diseños Observacionales: Ajuste y aplicación en psicología del deporte. Cuadernos de Psicología del Deporte, 11(2), 63-76.
Anguera, M. T., Blanco, Á., Losada, J. L., & Hernández-Mendo, A. (2000). La metodología observacional en el deporte: conceptos básicos. Lecturas: Educación Física y Deportes, Revista Digital, 5(24).
Blanco, Á. (1991). La teoría de la generalizabilidad aplicada a diseños observacionales. Revista Mexicana de Análisis de la Conducta, 17(3), 23-64.
Blanco, Á., Castellano, J., Hernández-Mendo, A., Sánchez, C. R., & Usabiaga, O. (2014). Aplicación de la TG en el deporte para el estudio de la fiabilidad, validez y estimación de la muestra. Revista de Psicologia del Deporte, 23(1), 131-137.
Cavedon, V., Zancanaro, C., & Milanese, C. (2015). Physique and Performance of Young Wheelchair Basketball Players in Relation with Classification. PLOS ONE, 10(11), e0143621. https://doi.org/10.1371/JOURNAL.PONE.0143621
Cohen, J. (1960). A Coefficient of Agreement for Nominal Scales. Educational and Psychological Measurement, 20(1), 37-46. https://doi.org/https://doi.org/10.1177/001316446002000104
Crespillo-Jurado, M., Anguera, M. T., Reigal, R. E., & Hernández-Mendo, A. (2021). Análisis de la calidad del dato de un instrumento de observación del clima motivacional: conductas verbales y proxémicas de monitores de mantenimiento físico. Cuadernos de Psicología del Deporte, 21(1), 18-42.
Crespo-Ruiz, B. M., Del Ama-Espinosa, A. J., & Gil-Agudo, Á. M. (2011). Relation Between Kinematic Analysis of Wheelchair Propulsion and Wheelchair Functional Basketball Classification. Adapted Physical Activity Quarterly, 28(2), 157-172. https://doi.org/10.1123/APAQ.28.2.157
Csataljay, G., James, N., Hughes, M., & Dancs, H. (2017). Effects of defensive pressure on basketball shooting performance. International Journal of Performance Analysis in Sport, 13(3), 594–601. https://doi.org/10.1080/24748668.2013.11868673
Efron, B. (1979). Bootstrap Methods: Another Look at the Jackknife. The Annals of Statistics, 7(1), 1-26. https://doi.org/10.1214/AOS/1176344552
Fernández, R., Ubal, M., Lorenzo, A., & Sampaio, J. (2010). Indicadores de rendimiento defensivo en baloncesto en los ganadores y perdedores. RICYDE. Revista Internacional de Ciencias Del Deporte, 6(19), 100–111. https://doi.org/10.5232/ricyde2010.01901
Fliess, O., Koseff, D., Tweedy, S., Molik, B., & Vanlandewijck, Y. (2021). Challenges and opportunities in wheelchair basketball classification– A Delphi study. Journal of Sports Sciences, 39(sup1), 7-18. https://doi.org/10.1080/02640414.2021.1883310
Francis, J., Owen, A., & Peters, D. M. (2019a). A New Reliable Performance Analysis Template for Quantifying Action Variables in Elite Men’s Wheelchair Basketball. Frontiers in Psychology, 10(JAN). https://doi.org/10.3389/FPSYG.2019.00016
Francis, J., Owen, A., & Peters, D. M. (2019b). Making Every «Point» Count: Identifying the Key Determinants of Team Success in Elite Men’s Wheelchair Basketball. Frontiers in Psychology, 10(JUL). https://doi.org/10.3389/FPSYG.2019.01431
Gabin, B., Camerino, O., Anguera, M. T., & Castañer, M. (2012). Lince: Multiplatform Sport Analysis Software. Procedia - Social and Behavioral Sciences, 46, 4692-4694. https://doi.org/10.1016/J.SBSPRO.2012.06.320
García-Fresneda, A., & Carmona, G. (2021). Short Distance Sprint Performance in Elite Wheelchair Basketball Women Players: Influence of Functional Classification. Apunts Educacion Fisica y Deportes, (144), 75-80. https://doi.org/10.5672/APUNTS.2014-0983.ES.(2021/2).144.09
García-Fresneda, A., Carmona, G., Yanci, J., & Iturricastillo, A. (2022). Initial Maximum Push-Rim Propulsion and Sprint Performance in Elite Women’s Wheelchair Basketball: Differences Between Players’ Functional Classification. International Journal of Sports Physiology and Performance, 17(8), 1187-1195. https://doi.org/10.1123/IJSPP.2021-0469
García Fresneda, A. (2019). Análisis del comportamiento y eficacia según las diferentes formaciones de baloncesto en silla de ruedas (Tesis doctoral). Universitat de Barcelona, Barcelona, España.
García, J. A., Aniz, I., Domínguez, J. O., & García, T. (2004). Influencia de las variables tiempo y distancia en la eficacia del juego con transformaciones en cuatro equipos de balonmano de alto nivel. Posibilidades para la aplicación en el entrenamiento. European Journal of Human Movement, (12), 71-86.
Gil, S. M., Yanci, J., Otero, M., Olasagasti, J., Badiola, A., Bidaurrazaga-Letona, I., … Granados, C. (2015). The Functional Classification and Field Test Performance in Wheelchair Basketball Players. Journal of Human Kinetics, 46(1), 219-230. https://doi.org/10.1515/HUKIN-2015-0050
Gómez-Ruano, M. Á., Pérez, J., Molik, B., Szyman, R. J., & Sampaio, J. (2014). Performance analysis of elite men’s and women’s wheelchair basketball teams. Journal of Sports Sciences, 32(11), 1066-1075. https://doi.org/10.1080/02640414.2013.879334
Gómez-Ruano, M. Á., Battaglia, O., Lorenzo, A., Lorenzo, J., Jiménez, S., & Sampaio, J. (2015). Effectiveness during ball screens in elite basketball games. Journal of Sports Sciences, 33(17), 1844-1852. https://doi.org/10.1080/02640414.2015.1014829
Gómez-Ruano, M. Á., Lorenzo, A., Ortega, E., Sampaio, J., & Ibáñez, S. J. (2007). Diferencias en las estadísticas de juego entre bases, aleros y pívots en baloncesto femenino. Cultura_Ciencia_Deporte [CCD], 2(6).
Gómez-Ruano, M. Á., Tsamourtzis, E., & Lorenzo, A. (2006). Defensive systems in basketball ball possessions. International Journal of Performance Analysis in Sport, 6(1), 98–107. https://doi.org/10.1080/24748668.2006.11868358
Gorospe, G., Hernández-Mendo, A., Anguera, M. T., & Martínez-Santos, R. (2005). Desarrollo y optimización de una herramienta observacional en el tenis de individuales. Psicothema, 17(1), 123-127.
Hernández-Mendo, A., Blanco, Á., Pastrana, J. L., Morales, V., & Ramos-Pérez, F. J. (2017). SAGT: Aplicación informática para análisis de generalizabilidad. Revista Iberoamericana de Psicologia del Ejercicio y el Deporte, 11(1), 77-89.
Hernández-Mendo, A., Montoro, J., Reina, Á., & Fernández, J. C. (2012). Desarrollo y optimización de una herramienta observacional para el bloqueo en voleibol. Revista Iberoamericana de Psicologia del Ejercicio y el Deporte, 7(1), 15-32.
Hileno, R. (2016). Observación y análisis de la cobertura del ataque en el voleibol masculino de alto nivel (Tesis doctoral). Universitat de Lleida, Lleida, España.
IWBF. (2023, enero 26). Basics of Classification in Wheelchair Basketball. Recuperado 26 de marzo de 2023, de IWBF Classification website: https://iwbf.org/the-game/classification/
Lapresa, D., Alsasua, R., Arana, J., Anguera, M. T., & Garzón, B. (2014). Análisis observacional de la construcción de las secuencias ofensivas que acaban en lanzamiento en baloncesto de categoría infantil. Revista de Psicología del Deporte, 23(2), 365–376
Lapresa, D., Álvarez, L., Arana, J., Garzón, B., & Caballero, V. (2013). Observational analysis of the offensive sequences that ended in a shot by the winning team of the 2010 UEFA Futsal Championship. Journal of Sports Sciences, 31(15), 1731-1739. https://doi.org/10.1080/02640414.2013.803584
Lapresa, D., Arana, J., Anguera, M. T., & Garzón, B. (2013). Comparative analysis of sequentiality using SDIS-GSEQ and THEME: A concrete example in soccer. Journal of Sports Sciences, 31(15), 1687–1695. https://doi.org/10.1080/02640414.2013.796061
Lozano, D. (2014). Análisis del comportamiento táctico ofensivo en alto rendimiento en balonmano (Tesis doctoral). Universitat de Lleida, Lleida, España.
Lozano, D., & Camerino, O. (2012). Eficacia de los sistemas ofensivos en balonmano. Apunts Educación Física y Deportes, (108), 70-81. https://doi.org/10.5672/APUNTS.2014-0983.ES.(2012/2).108.08
Luarte-Rocha, C., de Campos, L. F. C. C., Campos, K. C., Segura, K. A., Henriquez, M., Ramírez, Y. P., … Duarte, E. (2022). Rendimiento físico de atletas varones de élite de baloncesto en silla de ruedas de la región del Biobío-Chile en inicio del período preparatorio: estudio transversal. Retos, (44), 1027-1036. https://doi.org/10.47197/RETOS.V44I0.91783
Malone, L. A., Gervais, P. L., & Steadward, R. D. (2002). Shooting mechanics related to player classification and free throw success in wheelchair basketball. Journal of Rehabilitation Research and Development, 39(6), 701-710.
Marszałek, J., Kosmol, A., Morgulec-Adamowicz, N., Mróz, A., Gryko, K., Klavina, A., … Molik, B. (2022). Anaerobic Variables As Specific Determinants of Functional Classification in Wheelchair Basketball. Journal of Human Kinetics, 82(1), 243-252. https://doi.org/10.2478/HUKIN-2022-000074
Merino, C., & Livia, J. (2009). Intervalos de confianza asimétricos para el índice la validez de contenido: Un programa Visual Basic para la V de Aiken. Anales de Psicología, 25(1), 169–171.
Mexas, K., Tsitskaris, G., Kyriakou, D., & Garefis, A. (2017). Comparison of effectiveness of organized offences between two different championships in high level basketball. International Journal of Performance Analysis in Sport, 5(1), 72–82. https://doi.org/10.1080/24748668.2005.11868317
Molik, B., Laskin, J. J., Kosmol, A., Skucas, K., & Bida, U. (2013). Relationship Between Functional Classification Levels and Anaerobic Performance of Wheelchair Basketball Athletes. Research Quarterly for Exercise and Sport, 81(1), 69-73. https://doi.org/10.1080/02701367.2010.10599629
Molina, J. J., Santos, J. A., Barriopedro, M., & Delgado, M. Á. (2004). Análisis de juego desde el modelo competitivo: un ejemplo aplicado al saque en voleibol. Kronos, 3(5), 37-45.
Montoya, M. (2010). Análisis de las finalizaciones de los jugadores extremo en balonmano (Tesis doctoral). Universitat de Barcelona, Barcelona, España.
Mullens, L. (1978). European Basketball Championships 1977: Reliability of the Observation Protocol. Attempt to Elaborate a Player Proficiency Protocol (Tesis de maestría). Katholieke Universiteit Leuven, Leuven, Bélgica.
Muñoz, A., Caballero, P., & Hernández, E. (2020). Diseño, validación y fiabilidad de un instrumento de evaluación del comportamiento táctico en mini voleibol. Retos, (38), 661-666. https://doi.org/10.47197/RETOS.V38I38.77792
Muñoz, V., & Serna, J. (2015). Diseño, fiabilidad y validez del instrumento de observación SOCCB para el análisis de las finalizaciones en baloncesto. Cuadernos de Psicología del Deporte, 15(3), 169-174.
Pérez-Tejero, J., & Arbex, J. P. (2015). Rendimiento del jugador de baloncesto en silla de ruedas según la estadística de juego. Cuadernos de Psicología del Deporte, 15(3), 231-236. https://doi.org/10.4321/S1578-84232015000300027
Putnick, D. L., & Bornstein, M. H. (2016). Measurement invariance conventions and reporting: The state of the art and future directions for psychological research. Developmental Review, 41, 71-90. https://doi.org/10.1016/J.DR.2016.06.004
Quiñones, Y., Morillo-Baro, J. P., Reigal, R. E., Morales-Sánchez, V., Vázquez-Diz, J. A., & Hernández-Mendo, A. (2019). El ataque posicional en balonmano: validación de un sistema de observación. Cuadernos de Psicología del Deporte, 19(3), 115-125.
Sabarit, A., Morillo-Baro, J. P., Reigal, R. E., Vázquez-Diz, J. A., Hernández-Mendo, A., & Morales-Sánchez, V. (2022). Analysis of Game Actions and Performance in Young Soccer Players: A Study Using Sequential Analysis. Sustainability, 14(20), 13263. https://doi.org/10.3390/SU142013263
Saltan, A., & Ankarali, H. (2017). The Role of Trunk Stabilization in Functional-Classification Levels in Wheelchair Basketball. Journal of Sport Rehabilitation, 26(4), 287-293. https://doi.org/10.1123/JSR.2016-0054
Skučas, K., Stonkus, S., Molik, B., & Skučas, V. (2009). Evaluation of Wheelchair Basketball Skill Performance of Wheelchair Basketball Players in Different Game Positions. Baltic Journal of Sport and Health Sciences, 4(75), 65-69. https://doi.org/10.33607/BJSHS.V4I75.412
Tsamourtzis, E., Karypidis, A., & Athanasiou, N. (2005). Analysis of fast breaks in basketball. International Journal of Performance Analysis in Sport, 5(2), 17–22. https://doi.org/10.1080/24748668.2005.11868324
Tsamourtzis, E., Salonikidis, K., Taxildaris, K., & Mawromatis, G. (2002). Technisch-taktische Merkmale von Siegern und Verlierern bei Herrenbasketballmannschaften. Leistungssport, 32(1), 54–58.
Vanlandewijck, Y. C., Evaggelinou, C., Daly, D. D., Van Houtte, S., Verellen, J., Aspeslagh, V., … Zwakhoven, B. (2003). Proportionality in Wheelchair Basketball Classification. Adapted Physical Activity Quarterly, 20(4), 369-380. https://doi.org/10.1123/APAQ.20.4.369
Vanlandewijck, Y. C., Evaggelinou, C., Daly, D. J., Verellen, J., Van Houtte, S., Aspeslagh, V., … Zwakhoven, B. (2004). The relationship between functional potential and field performance in elite female wheelchair basketball players. Journal of Sports Sciences, 22(7), 668-675. https://doi.org/10.1080/02640410310001655750
Vanlandewijck, Y. C., Spaepen, A. J., & Lysens, R. J. (1995). Relationship between the Level of Physical Impairment and Sports Performance in Elite Wheelchair Basketball Athletes. Adapted Physical Activity Quarterly, 12(2), 139-150. https://doi.org/10.1123/APAQ.12.2.139
Vaquera, A., Cubillo, R., García-Tormo, J. V., & Morante, J. C. (2013). Validation of a tactical analysis methodology for the study of pick and roll in basketball. Revista de Psicologia del Deporte, 22(1), 277-281.
Vázquez-Diz, J. A., Morillo-Baro, J. P., Reigal, R. E., Morales-Sánchez, V., & Hernández-Mendo, A. (2019). Diseño y validación de una herramienta de observación para porteros en balonmano playa. Cuadernos de Psicología del Deporte, 19(2), 135-146. https://doi.org/10.6018/cpd.368901
Descargas
Publicado
Cómo citar
Número
Sección
Licencia
Derechos de autor 2023 Retos
Esta obra está bajo una licencia internacional Creative Commons Atribución-NoComercial-SinDerivadas 4.0.
Los autores que publican en esta revista están de acuerdo con los siguientes términos:
- Los autores conservan los derechos de autor y garantizan a la revista el derecho de ser la primera publicación de su obra, el cuál estará simultáneamente sujeto a la licencia de reconocimiento de Creative Commons que permite a terceros compartir la obra siempre que se indique su autor y su primera publicación esta revista.
- Los autores pueden establecer por separado acuerdos adicionales para la distribución no exclusiva de la versión de la obra publicada en la revista (por ejemplo, situarlo en un repositorio institucional o publicarlo en un libro), con un reconocimiento de su publicación inicial en esta revista.
- Se permite y se anima a los autores a difundir sus trabajos electrónicamente (por ejemplo, en repositorios institucionales o en su propio sitio web) antes y durante el proceso de envío, ya que puede dar lugar a intercambios productivos, así como a una citación más temprana y mayor de los trabajos publicados (Véase The Effect of Open Access) (en inglés).
Esta revista sigue la "open access policy" de BOAI (1), apoyando los derechos de los usuarios a "leer, descargar, copiar, distribuir, imprimir, buscar o enlazar los textos completos de los artículos".
(1) http://legacy.earlham.edu/~peters/fos/boaifaq.htm#openaccess
