Tabla 1. Dos científicos con el mismo índice H: Investigador A, menor número de publicaciones pe...

Figura 1. Evolución por país del porcentaje anual de contribución a la producción mundial (arrib...

Tabla 2. Número de documentos totales en la categoría Medicina y por cada especialidad, producido...

Tabla 3. Indice H (actualizado a diciembre de 2011) en la categoría Medicina y de cada especialid...

Tabla 4. Valores promedio ± desvío estándar (excepto la tasa de crecimiento acumulada) de produ...

Tabla 5. Variables económicas entre loa años 2000 y 2009.

Tabla 6. Correlación entre variables económicas, demográficas y científicas

Introducción

A partir de su publicación en 2005, el índice H es uno de los métodos más utilizados para cuantificar la productividad e impacto de los investigadores a nivel mundial. A diferencia de los métodos utilizados previamente para la evaluación del desempeño de un autor, el índice H intenta combinar en un solo número la productividad científica (es decir, el número de documentos publicados) y su repercusión (número de citas recibidas).1 Aun cuando existe controversia acerca de las limitaciones de este índice,2-7 el mismo ha sido recientemente incluido dentro de los parámetros que se valoran en los concursos docentes de los principales Hospitales Universitarios de Europa y Estados Unidos y en los ascensos dentro de las categorías de los investigadores de diversas agencias nacionales.8,9 Asimismo, el Consejo Brasileño de Desarrollo Científico y Tecnológico lo utiliza en su plataforma de evaluación.10 Por otro lado, el índice H permite también analizar y comparar el desempeño de grupos de investigación, instituciones, ciudades y países. En el ámbito regional, Kellner et al.11 realizaron un estudio de los miembros de la Academia Brasileña de Ciencias utilizando esta metodología, y en un estudio reciente de Rodrigues Pereira y cols.12 se hallaron diferencias significativas en la producción científica en salud pública de las distintas regiones brasileñas. En el caso de Chile, su revista médica nacional (Revista Médica de Chile) realizó un análisis de sus publicaciones utilizando el índice H y las citas recibidas.13 Por el contrario, no hemos encontrado en la bibliografía internacional publicaciones que analicen la producción latinoamericana en medicina, y por lo tanto decidimos realizar la primera evaluación de la producción científica en medicina de la región. Los objetivos de nuestro estudio fueron evaluar el índice H y el número de los documentos publicados por cada país latinoamericano. Del mismo modo, analizamos el número de citas recibidas y la evolución en el tiempo de la producción científica en el período 1996-2010 de los cuatro países latinoamericanos con mejor índice H. Por último, estudiamos la correlación existente entre la población, el producto bruto interno y la inversión en investigación y desarrollo de cada país con su producción científica.

Material y métodos

Utilizando el Scimago Journal and Country Rank basado en los registros de Elsevier´s B.V. Scopus database14 (http://www.scimagojr.com), obtuvimos el número total de documentos producidos en cada país para el período 1996-2010 y su índice H (actualizado a diciembre de 2011). Un autor o institución tiene un índice H de h cuando h número de sus publicaciones fueron citadas al menos h número de veces.1 En el ejemplo de la Tabla 1, se observa que un investigador con 6 publicaciones y 137 citas totales tiene un índice H de 4, mientras que otro investigador con 10 publicaciones y 26 citas totales tiene también un índice H de 4. Estos investigadores comparten un mismo valor de H debido a que en ambos casos sólo 4 de sus publicaciones tienen al menos 4 citas.15 Los países incluidos para nuestro análisis fueron: Argentina, Bolivia, Brasil, Chile, Colombia, Ecuador, México, Paraguay, Perú, Uruguay y Venezuela. Los artículos con múltiples autores de diferentes países se consideraron como un documento para cada país. Se analizó primero la categoría “Medicina” y luego dentro de las categorías disponibles para cada especialidad. Las categorías de las especialidades incluidas fueron: Cardiología, Cirugía, Dermatología, Endocrinología, Gastroenterología, Ginecología y Obstetricia, Infectología, Nefrología, Neurología, Oncología, Pediatría y Neonatología, Radiología y Terapia Intensiva. Luego, realizamos un subanálisis de los 4 países con mayor índice H. Este subanálisis incluyó: el número total de documentos publicados citables (sólo artículos, revisiones y comunicaciones a congresos), contribución porcentual al número total de publicaciones mundiales (documentos producidos en un país en un año / el total de los documentos producidos en el mundo en el mismo año), contribución porcentual al número total de publicaciones en Latinoamérica (documentos producidos en un país en un año / el total de los documentos producidos en Latinoamérica en el mismo año), número total de citas recibidas, porcentaje de autocitas (citas que recibe un artículo por publicaciones originadas en el mismo país), el promedio de citas recibidas por documento, tasa anual de crecimiento de publicaciones citables (publicaciones citables de un año / publicaciones citables del año anterior x 100) y la tasa de crecimiento total del período 1996-2010 (publicaciones citables producidas en 2010 / publicaciones citables producidas en 1996 x 100). Por último, analizamos la evolución a lo largo del período 2000-2009 y la posible correlación existente entre la población de cada país, su Producto Bruto Interno (PBI); su Producto Bruto Interno per Capita (PBI per capita), el porcentaje total del PBI destinado a actividades de Investigación y Desarrollo (I y D); el gasto en I y D por habitante y las variables de producción científica. Los datos económicos y demográficos fueron obtenidos de la Red de Indicadores de Ciencia y Tecnología Iberoamericana e Interamericana (http://www.ricyt.org)16 y el Banco Mundial (http://www.worldbank.org/).17

Análisis estadístico

Las variables discretas son presentadas en números y porcentaje según corresponda. Las variables continuas se presentan como el promedio ± desvío estándar. La comparación entre los 4 países con mayor índice H fue realizada utilizando el método de ANOVA con análisis Bonferroni post-hoc. Las correlaciones entre variables se evaluaron utilizando el coeficiente rho de correlación de Spearman. Fueron considerados como significativos valores de p<0,05. El análisis estadístico fue realizado utilizando el software estadístico versión SPSS 17.0 (Chicago, Illinois, EE.UU.).

Resultados

Durante el período 1996-2010, el conjunto de los países analizados produjo 147.710 documentos totales y la región Latinoamérica alcanzaba un índice H de 255 para la categoría “Medicina” del Scimago Journal Ranking. Brasil se ubica en primer lugar en relación con el número total de documentos publicados en Latinoamérica (81.230 documentos) y 16º en el ranking mundial de la categoría “Medicina”. Dentro de las especialidades médicas analizadas para este país, la producción científica brasileña en Infectología es la mejor posicionada, ubicándose 4º a nivel mundial con 4.968 documentos totales publicados en el período 1996-2010. En segundo y tercer lugar en la categoría “Medicina” se encuentran, México y la Argentina con 22.441 y 18.504 documentos publicados. Dentro de las especialidades de estos países, las publicaciones totales en Dermatología y en Infectología alcanzaron el mejor lugar en el ranking mundial obtenido por México y la Argentina respectivamente (24º y 23º). Los documentos totales publicados por cada país y especialidad son presentados en la Tabla 2.

Con relación al índice H, Brasil se ubica en la primera posición para Latinoamérica seguido por la Argentina, México y Chile. Las especialidades con mejor ubicación en el ranking mundial para el índice H de cada país fueron: Infectología (11º), Terapia Intensiva (25º), Dermatología (29º) y Pediatría (25º) para Brasil, Argentina, México y Chile, respectivamente (Tabla 3). Del mismo modo, Brasil lidera la región en el número de documentos citables producidos, citas recibidas y contribución porcentual a la producción mundial de documentos (Tabla 4).

En el análisis de la evolución temporal de la producción científica de la región (Tabla 4 y Figura 1), observamos que Brasil incrementó su porcentaje de producción de documentos en relación a la producción regional de 40,69% para el año 1996 a 56,89% en el año 2010 mientras que la Argentina, Chile y México disminuyeron su contribución porcentual regional de 13,7% a 10,1%; de 7,5% a 6,6% y de 18,9% a 12,34%, respectivamente. Así mismo, se registró un aumento del porcentaje de producción de documentos en relación a la producción mundial en los 4 países analizados. En 1996, Brasil contribuía a al producción mundial con un 0,61% y en el año 2010 su contribución fue del 2,14%, la Argentina aumentó su contribución de 0,21% a 0,38%, Chile de 0,11% a 0,25% y México de 0,29% a 0,46% (Figura 1).

En el análisis de los indicadores económicos (Tabla 5) de los 3 países que lideran el ranking regional, la Argentina presenta un PBI menor al de Brasil y México (223±78,6 vs. 949±446; p<000,1 y 223±78,6 vs. 808±174; p<0,001; valores expresados en miles de millones de USD) y Brasil presenta mayor inversión porcentual del PBI destinada a I y D, comparado con Argentina y México respectivamente (1,02%±0,08 vs. 0,46%±0,06; p<0,001 y 1,02%±0,08 vs. 0,39%±0,02; p<0,001). La Argentina supera en inversión porcentual del PBI destinada a I y D a México (0,46±0,06 vs. 0,39±0,02; p=0,03). En el análisis de dólares invertidos en I y D por habitante, se observó nuevamente una diferencia significativa entre Brasil comparado con la Argentina y México (54±27,9 vs. 27,9±12; p<0,001 y 54±27,9 vs. 30,3±4,9; p<0,001; valores expresados en USD). Con relación a la fuente de financiación, en el año 2009 en la Argentina, 73,23% de los fondos fueron aportados por el Gobierno, 21,43% por empresas y 3,84% por Universidades. En el mismo año, en Brasil, 51,28% de los fondos fueron aportados por el Gobierno, 46,28% por empresas y 2,13% por Universidades. En México los porcentajes del 2009 fueron de: 46,92% (Gobierno), 43,19% (Empresas) y 6,35% (Universidades). En la Tabla 6, presentamos los coeficientes de correlación lineal existente entre el índice H, documentos totales, población y variables económicas para todos los países estudiados de la región.

Discusión

Según el Instituto de Estadísticas de la UNESCO, a lo largo de la última década, el gasto mundial en investigación y desarrollo aumentó de 790 miles de millones de dólares en 2002 a 1146 miles de millones dólares en 2007.18 Del mismo modo, el número de investigadores y las publicaciones científicas se vieron incrementadas en un 20 y 31%, respectivamente, en el ámbito mundial. También, a lo largo de esta última década, se desarrollaron grandes bases de datos de publicaciones científicas que permitieron la elaboración de índices para la evaluación de la productividad y calidad de la producción de los autores, organizaciones y revistas médicas. De esta forma surgieron medidas cuantitativas como el factor de impacto, utilizado para expresar la frecuencia promedio con la que fueron citados en los últimos dos años los artículos publicados de una revista en particular4 y el índice H, utilizado en nuestra investigación. Como puede observarse en las Tablas 1, 2 y 3, existe un claro predominio de la producción científica brasileña, seguida por la producción Argentina y de México que alternan en el segundo puesto según se analice el índice H o los documentos totales producidos. Levemente por detrás se encuentra la producción científica chilena. Por otra parte, observamos también una importante diferencia entre la producción de Bolivia, Ecuador y Paraguay y la de los líderes de la región. Estos últimos 3 países no superan los mil documentos publicados cada uno en el período 1996-2010 y presentan índices H menores a 50. Esta diferencia observada a nivel regional podría ser comparada a la existente entre los países líderes en producción científica a nivel mundial y los líderes de la región latinoamericana. Brasil presenta un índice H de 181, mientras que los 5 países líderes a nivel mundial presentan índices H superiores a los 400 puntos. Por otro lado, la suma de la producción de documentos totales de los 5 países líderes de Latinoamérica fue de 138.158 en comparación a los 2.537.741 producidos por los líderes mundiales para el mismo período. Sin embargo, como puede observarse en la Tabla 4 y la Figura 1, Brasil, Argentina, México y Chile presentaron crecimientos de su producción científica superiores al 200% casi duplicando (y en el caso de Brasil triplicando) su contribución a la producción mundial. Nuestros resultados, coinciden con la disminución observada en informes previos de la contribución porcentual mundial por parte de Estados Unidos de América, Gran Bretaña, Japón, Alemania y Francia.

En línea con hallazgos previos de un análisis limitado al área cardiovascular,19 los altos coeficientes de correlación encontrados entre el valor de índice H, los documentos totales producidos, la población y el PBI de cada país (Tabla 5), podrían sugerir que la predominancia regional de la producción científica brasileña es resultado de su gran población (190 millones de habitantes) y su poderío económico (PBI de 2.493 miles de millones de USD para el año 2011). Sin embargo, en la Tabla 4 observamos que a pesar de que el PBI mexicano es significativamente superior al de la Argentina, este último presenta un índice H superior. Del mismo modo, Nueva Zelanda (país inmediatamente superior a Brasil en el ranking de índice H) presenta una población y un PBI enormemente inferior al brasileño (aproximadamente 4 millones de habitantes y un PBI nominal de 161 miles de millones de dólares). Estas observaciones podrían explicarse debido a los altos valores de correlación encontrados entre la inversión porcentual del PBI en investigación y desarrollo y la productividad científica de los países latinoamericanos (Tabla 5). Esta hipótesis se ve reforzada por los resultados presentados en la Tabla 4, donde se observa una inversión porcentual promedio en investigación y desarrollo por parte de la Argentina significativamente superior a la mexicana y al mismo tiempo que la inversión porcentual brasileña es superior a la realizada por parte de la Argentina y de México. De esta forma, consideramos que el gran crecimiento de la producción científica brasileña y su predominancia a nivel regional son resultado, no sólo de su situación económica y poblacional, sino también del mayor porcentaje de inversión destinado a la investigación científica (Tabla 4 y 5).

Por otra parte, es importante señalar que el alto coeficiente de correlación (r=0,99) observado entre los documentos publicados y el índice H (Tabla 6), parecería contradecir la previamente mencionada capacidad de este índice de equilibrar la productividad y la repercusión de un autor (evitando de este modo premiar el gran volumen de publicaciones aún cuando estas no recibieran citas) así como también nuestras observaciones previas en un estudio de producción científica en cardiología a nivel mundial. Consideramos que esta aparente contradicción es resultado de un porcentaje de citas por documento relativamente similar para las naciones estudiadas (Tabla 4) lo que genera que a igual citas promedio por documento, el número total de documentos producidos defina el valor final de los diversos índices H.

Limitaciones del estudio

Debido a que el análisis presentado se basó principalmente en el índice H, todas las limitaciones del mismo se aplican a nuestro estudio. El índice H puede diferir levemente según la base de datos de publicaciones utilizada (Scopus, Web of Science or Google Scholar).20 El índice H no discrimina según el orden de los autores, un autor puede tener un elevado índice H sin tener ningún artículo publicado como primer autor. El índice H no discrimina entre los artículos publicados o las citas recibidas según la calidad de las revistas (incluidas o no en Medline, sistema de revisión por pares o factor de impacto). El índice H no discrimina entre autocitas y citas hechas por otros autores.5 Otra limitación de nuestro estudio es que las variables económicas fueron analizadas únicamente para Brasil, Argentina y México en el período 2000-2009. Esta limitación surge debido a la imposibilidad de obtener información acerca de la inversión en investigación y desarrollo en Chile y la ausencia de datos acerca de la inversión brasileña previa al año 2000.

Conclusión

Sobre la base de lo observado en nuestra investigación, concluimos que Brasil, Argentina, México y Chile lideran la producción científica médica en el ámbito regional y presentan importantes crecimientos de su producción en los últimos quince años. Este crecimiento podría encontrarse asociado a la situación económica regional y al aumento observado de la inversión en investigación y desarrollo. Por otra parte, la influencia de la región a nivel mundial se encuentra en aumento si bien es aún limitada.  

1. Hirsch JE. An index to quantify an individual’s scientific research output. Proc Natl Acad Sci U S A. 2005 Nov 15;102(46):16569-72.

2. Zhang CT. A proposal for calculating weighted citations based on author rank. EMBO Rep. 2009 May;10(5):416-417.

3. Sekercioglu CH. Quantifying coauthor contributions. Science 2008 Oct 17;322(5900):371.

4. Lehmann S, Jackson AD, Lautrup BE. Measures for measures. Nature 2006 Dec 21;444(7122):1003-1004.

5. Bartneck C, Kokkelmans S. Detecting h-index manipulation through self-citation analysis. Scientometrics 2011 Apr;87(1):85-98.

6. Wendl MC. H-index: however ranked, citations need context. Nature 2007;449(7161):403.

7. Batista PD, Campiteli MG, Kinouchi O. Is it possible to compare researchers with different scientific interests? Scientometrics 2006;68(1):179-189.

8. Bruining N, Cummins P, Serruys PW. Impact factors: scientific and career assessment by numbers. EuroIntervention 2011 May;7(1):143-147.

9. Rodríguez A. Scientific Production by Cardiologists and Scientific Societies of Cardiology: Differences and Similarities between Argentina and Regional and Central Countries. Rev Argent Cardiol 2012;80(1):53-59.

10. Thomaz PG, Assad RS, Moreira LFP. Uso do fator de impacto e do índice H para avaliar pesquisadores e publicações. Arquivos Brasileiros de Cardiologia. 2011;96:90-93.

11. Kellner AW, Ponciano LC. H-index in the Brazilian Academy of Sciences: comments and concerns. An Acad Bras Cienc. 2008 Dec;80(4):771-781.

12. Pereira JC, Bronhara B. H-index of Collective Health professors in Brazil. Rev Saude Publica. 2011 Jun;45(3):599-606.

13. Krauskopf M, Krauskopf E. A scientometric view of Revista Medica de Chile. Rev Med Chil. 2008 Aug;136(8):1065-1072.

14. SCImago Journal & Country rank (based on Scopus). http://www.scimagojr.com/

15. Bornmann L. H Index. A New Measure to quantify the research output of individual scientists. Institute for Research Information and Quality Assurance; 2006.

16. Red de Indicadores de Ciencia y Tecnología Iberoamericana e Interamericana. http://www.ricyt.org/

17. Bank W. http://www.worldbank.org/

18. UNESCO Institute for Statistics. Spend on research and development; 2010

19. Rodríguez-Granillo GA, Rodríguez AE, Bruining N, et al. Quantification of scientific output in Cardiovascular Medicine: A perspective based on global data. Eurointervention Journal 2013;9 -online publish-ahead-of -print august 2013.

20. Meho LI, Yang K. Impact of data sources on citation counts and rankings of LIS faculty: Web of science versus scopus and google scholar. Journal of the American Society for Information Science and Technology. 2007;58(13):2105-25.

Para descargar el PDF del artículo
Análisis de la producción científica latinoamericana en medicina

Haga click aquí