Analysis of scientific production and bibliometric impact of a group of Spanish clinical researchers
DOI:
https://doi.org/10.23938/ASSN.0272Keywords:
Bibliometric analysis. Journal impact factors. Publications.Abstract
Background. To study the behaviour of several indicators of scientific production and repercussion in a group of Spanish clinical researchers and to evaluate their possible utility for interpreting individual or collective scientific pathways.
Method. We performed a unicentric, ecological pilot study involving a group of physicians with consolidated research experience. From the Science Citation Index Expanded (SCI-Expanded) database, we obtained the number of publications of each author (indicator of production) and the number of citations, impact factor and h index (indicators of repercussion). These indicators were calculated individually for each of the years of research experience and we assessed the relationship between the experience of the researcher and the value of the indicator achieved, the relationship between these indicators themselves, and their temporal evolution, both individually and for the entire group.
Results. We analysed 35 researchers with a research experience of 28.4 (9.6) years. The h index showed the lowest coefficient of variance. The relationship between the indicators and research experience was significant, albeit modest (R2 between 0.15-0.22). The 4 indicators showed good correlations. The temporal evolution of the indicators, both individual and collective, adjusted better to a second grade polynomial than a linear function: individually, all the authors obtained R2>0.90 in all the indicators; together the best adjustment was produced with the h index (R2=0.61). Based on the indicator used, substantial variations may be produced in the researchers’ ranking.
Conclusions. A model of the temporal evolution of the indicators of production and repercussion can be described in a relatively homogeneous sample of researchers and the h index seems to demonstrate certain advantages compared to the remaining indicators. This type of analysis could become a predictive tool of performance to be achieved not only for a particular researcher, but also for a homogeneous group of researchers corresponding to a specific scientific niche.
Downloads
References
1. HANNEY S, GONZÁLEZ BLOCK MA. Evaluación del impacto de la investigación en la política sanitaria: conceptos y casos concretos. Med Clin (Barc) 2008; 131 (Supl 5): 81-86.
https://doi.org/10.1016/S0025-7753(08)76412-1
2. ESCUDERO-GÓMEZ C, ESTRADA-LORENZO JM, LÁZARO DE MERCADO P. El impacto de la investigación en la práctica clínica. Med Clin (Barc) 2008; 131 (Supl 5): 25-29.
https://doi.org/10.1016/S0025-7753(08)76403-0
3. GARCÍA-ROMERO A. La evaluación del impacto de la investigación biomédica. Situación actual y perspectivas de futuro. Med Clin (Barc) 2008; 131 (Supl 5): 1-5.
https://doi.org/10.1016/S0025-7753(08)76399-1
4. FIGUEREDO-GASPARI E. Valoración curricular de las publicaciones científicas. Med Clin (Barc) 2005; 125: 661-665.
https://doi.org/10.1157/13081386
5. GARFIELD E. Citation indexes to science: a new dimension in documentation through association of ideas. Science 1955; 122: 108-111.
https://doi.org/10.1126/science.122.3159.108
6. CAMÍ J. Impactolatría: diagnóstico y tratamiento. Med Clin (Barc) 1997; 109: 515-524.
7. HIRSCH JE. An index to quantify an individual's scientific research output. Proc Nat Acad Sci. 2005; 102:16572.
https://doi.org/10.1073/pnas.0507655102
8. MIRÓ O, BURBANO P. El factor de impacto, el índice h y otros indicadores bibliométricos. An Sist Sanit Navar 2013, 36: 371-377.
https://doi.org/10.4321/S1137-66272013000300001
9. MIRÓ O, MARTÍN-SÁNCHEZ FJ. Factor de impacto, índice-h y otras variables para objetivar la relevancia de un investigador. Rev Clin Esp 2012; 212: 48-49.
https://doi.org/10.1016/j.rce.2011.07.020
10. CAMÍ J, ZULUETA MA, FERNÁNDEZ MT, BORDONS M, GÓMEZ I. Spanish scientific production in biomedicine and health sciences during the period 1990-1993 (Science Citation Index and Social Science Citation Index) and comparison to period 1986-1989. Med Clin (Barc) 1997; 109: 481-496.
11. MÉNDEZ-VÁSQUEZ RI, SUÑÉN-PINYOL E, CERVELLÓ R, CAMÍ J. Bibliometric map of Spain 1996-2004: biomedicine and health sciences. Med Clin (Barc) 2008; 130: 246-253.
https://doi.org/10.1157/13116548
12. FERNÁNDEZ-GUERRERO I, BURBANO SANTOS P, MARTÍN-SÁNCHEZ FJ, HIDALGO-RODRÍGUEZ A, LEAL-LOBATO MM, REVILLA-DOCE C et al. Producción científica de los urgenciólogos españoles durante el quinquenio 2010-2014 y comparación con el quinquenio 2005-2009. Emergencias 2016; 28: en prensa
13. MIRÓ O, ESCALADA X, BOQUÉ C, GENÉ E, JIMÉNEZ FÁBREGA FX, NETTO C et al. Estudio SUHCAT (3): mapa docente e investigador de los servicios de urgencias hospitalarios de Cataluña. Emergencias 2014; 26: 47-56.
14. MIRA JJ, LORENZO S, NAVARRO IM, GUILABERT M, PÉREZ-JOVER V. La reputación de los hospitales españoles. Bases para el desarrollo de un índice de reputación de los hospitales. An Sist Sanit Navar 2015; 38: 247-254.
https://doi.org/10.4321/S1137-66272015000200008
15. FERNÁNDEZ-GUERRERO IM. Tesis doctorales españolas en Medicina de Urgencias y Emergencias (1978-2013). Emergencias 2015; 27: 129-134.
16. PANICHKITKOSOLKUL W. Improved confidence intervals for a coefficient of variation of a normal distribution. Thailand Statistician 2009; 7: 193-199.
17. MIRÓ O. Necesidad de colaboración en investigación entre cardiólogos y médicos de urgencias. An Sist Sanit Navar 2014; 37: 9-16.
https://doi.org/10.4321/S1137-66272014000100002
18. MINTEGI S. Investigación en urgencias pediátricas. La red de investigación de la Sociedad Española de Urgencias de Pediatría. Emergencias 2012; 24: 238-240.
19. GONZÁLEZ DE DIOS J, MATEOS HERNÁNDEZ MA, GONZÁLEZ CASADO I. Factor de impacto internacional, nacional y por especialidades: en busca del mejor indicador bibliométrico. Rev Esp Pediatr 1998; 54: 430-436.
20. PIÑERA SALMERÓN P. La investigación en red en Medicina de Urgencias y Emergencias. Emergencias 2012; 24: 234-237.
21. MATOS CASTRO S, BURILLO-PUTZE G. El triaje avanzado y la investigación en toxicología clínica. La respuesta científica a preguntas clínicas en urgencias. Emergencias 2014; 26: 424-426.
22. Grupo Scimago. El índice h de Hirsch: su aplicación a algunos de los científicos españoles más destacados. El profesional de la información 2007; 16: 47-49.
https://doi.org/10.3145/epi.2007.jan.05
23. IMPERIAL J., RODRÍGUEZ-NAVARRO A. Utilidad del índice h de Hirsch para evaluar la investigación en España, Universidad Politécnica de Madrid, 2005 (consultado 15/11/2012). Disponible en: http://www.bit.etsia.upm.es/Imperial_Rodriguez-Navarro.Pdf
24. ALEIXANDRE BENAVENT R, VALDERRAMA ZURIÁN JC, CASTELLANO GÓMEZ M, SIMÓ MELÉNDEZ R, NAVARRO MOLINA C. Factor de impacto de las revistas médicas españolas. Med Clin (Barc) 2004; 123: 697-701.
https://doi.org/10.1016/S0025-7753(04)75333-6
25. GONZÁLEZ DE DIOS J, GONZÁLEZ GUITIÁN C. El español como vehículo de transmisión de los avances científicos. Emergencias 2014; 26: 406-410.
26. POCH BROTO J. Español y Medicina. Emergencias 2014; 26: 404-405.
https://doi.org/10.1177/0843871414528082l
27. NAVARRETE CORTÉS J, BANQUERI OZÁEZ J. Los sistemas de información científica: herramientas para medir el impacto de la investigación biomédica. Med Clin (Barc) 2008; 131 (Supl 5): 71-80.
https://doi.org/10.1016/S0025-7753(08)76411-X
28. SCOPUS. (consultado el 22/11/2012). Disponible en: http://www.scopus.com/home.url
29. SCIMAGO. Research Group. (consultado el 22/11/2011). Disponible en http://www.scimago.es/
30. Harzing.com website. (consultado el 22/11/2011). Disponible en: http://www.harzing.com/index.htm
31. SALGADO J, PÁEZ D. La productividad científica y el índice h de Hirsch de la Psicología Social española. Convergencia entre indicadores de productividad y comparación con otras áreas. Psicothema 2007; 19: 179-189.
32. Biblioteca de la Universidad de Extremadura. El índice h de Hirsch (consultado el 25/11/2012). Disponible en: http://biblioteca.unex.es/aprendizaje-e-investigacion/investigacion/221-indice-h.html
33. JENSEN P, ROUQUIER J, CROISSANT Y. Testing bibliometric indicators by their prediction of scientists promotions, 2008 (consultado 10/11/2012). Disponible en: http://arxiv.org/abs/0811.0237v1
34. BATISTA PD, CAMPITELI MG, KINOUCHI O, MARTÍNEZ AS. Is it possible to compare researchers with different scientific interests? (consultado 8/11/2012). Disponible en: http://arxiv.org/ftp/physics/papers/0509/0509048.pdf
35. REYNOLDS JC, MENEGAZZI JJ, YEALY DM. Emergency medicine journal impact factor and change compared to other medical and surgical specialties. Acad Emerg Med 2012; 19: 1248-1254.
https://doi.org/10.1111/acem.12017
36. LI Q, JIANG Y, ZHANG M. National representation in the emergency medicine literature: a bibliometric analysis of highly cited journals. Am J Emerg Med 2012; 30: 1530-1534.
https://doi.org/10.1016/j.ajem.2011.12.023
37. ROZMAN C. Reflexiones sobre la investigación biomédica en España. Med Clin (Barc) 2003; 120: 19-23.
https://doi.org/10.1016/S0025-7753(03)73591-X
38. MIRÓ O, SALGADO E, GONZÁLEZ-DUQUE A, TOMÁS S, BURILLO-PUTZE G, SÁNCHEZ M. Producción científica de los urgenciólogos españoles durante los últimos 30 años (1975-2004). Análisis bibliométrico descriptivo. Emergencias 2007; 19: 6-15.
39. BORNMANN L, DANIEL H. Does the h-index for ranking of scientists really work? Scientometrics 2005; 65: 391-392.
https://doi.org/10.1007/s11192-005-0281-4
40. MIRÓ O. Acerca del nombre de los autores españoles. Med Clin (Barc) 2010; 135: 41.
https://doi.org/10.1016/j.medcli.2009.04.004
41. ENGQVIST L, FROMMEN J, The h-index and self-citations. Trends Ecol Evol 2008; 23: 250-252.
https://doi.org/10.1016/j.tree.2008.01.009
42. HUANG M. Probing the effect of author self-citations on h index: A case study of environmental engineering. Journal of Information Science 2011; 37: 453-461.
https://doi.org/10.1177/0165551511412027
43. PAGEL PS, HUDETZ JA. H-index is a sensitive indicador of academia activity in highly productive anaesthesiologists: results of a bibliometric análisis. Acta Anaesthesiol Scand 2011; 55: 1085-1089.
Additional Files
Published
How to Cite
Issue
Section
License
Copyright (c) 2016 Anales del Sistema Sanitario de Navarra
This work is licensed under a Creative Commons Attribution-ShareAlike 4.0 International License.
La revista Anales del Sistema Sanitario de Navarra es publicada por el Departamento de Salud del Gobierno de Navarra (España), quien conserva los derechos patrimoniales (copyright ) sobre el artículo publicado y favorece y permite la difusión del mismo bajo licencia Creative Commons Reconocimiento-CompartirIgual 4.0 Internacional (CC BY-SA 4.0). Esta licencia permite copiar, usar, difundir, transmitir y exponer públicamente el artículo, siempre que siempre que se cite la autoría y la publicación inicial en Anales del Sistema Sanitario de Navarra, y se distinga la existencia de esta licencia de uso.
