Productividad en el ISI de los investigadores mexicanos y consolidados (nivel III) del SNI, en Physics Multidisciplinary, 1996-2003

Gerardo Reyes¹*, Jordi Suriñach** y Luis A. Rivas***

* Doctor en Estudios Empresariales (perfil actuariales). Investigador y catedrático en el Centro Universitario UAEM Valle de Chalco. Sus líneas de investigación abordan la evaluación académica y el Sistema Nacional de Ciencia y Tecnología.

** Doctor en Ciencias Económicas y Empresariales. Investigador y catedrático en la Facultad de Economía y Empresa de la Universidad de Barcelona. Sus líneas de investigación son la economía regional, modelización regional, econometría y bibliometría.

*** Doctor en Ciencias Administrativas. Investigador y catedrático en la Escuela Superior de Comercio y Administración del Instituto Politécnico Nacional.

Recibido: 2 de octubre de 2014.
Aceptado para su publicación: 19 de marzo de 2014.

Resumen

En este artículo mostramos la productividad alcanzada por los investigadores mexicanos consolidados, nivel III, del Sistema Nacional de Investigadores (SNI), en las disciplinas definidas por el Institute for Scientific Information (ISI) a partir del número de publicaciones mexicanas de 1996 a 2003. Utilizamos el criterio de Bauwens (1998) para llevar a cabo un ranking por institución y autor individual en la disciplina del ISI con la mayor concentración de publicaciones mexicanas, es decir, Physics Multidisciplinary. Este análisis bibliométrico sirvió para identificar a los investigadores mexicanos consolidados que mostraron el mayor respaldo internacional, como realmente lo es el publicar en revistas de calidad ISI. El principal hallazgo es que los investigadores nivel III tienen un nivel de publicación ISI escaso (promedio anual de 0.4 artículos por investigador), y representa 18% de las publicaciones mexicanas en el ISI. La Universidad Nacional Autónoma de México (UNAM) y el Centro de Investigación y de Estudios Avanzados (Cinvestav) fueron las instituciones con más citas en el campo Physics Multidisciplinary.

Palabras clave: bibliometría, criterio de Bauwens, ISI, SNI, Physics Multidisciplinary.

Abstract

In this article we show the productivity achieved by Consolidated Mexican researchers, level III of the National System of Researchers (SNI) in the disciplines defined by the Institute for Scientific Information (ISI), using the number of Mexican publications from 1996 to 2003. So, we use the criterion Bauwens to perform a ranking by institution and individual author in the discipline of ISI with the highest concentration of Mexican publications, namely, Multidisciplinary Physics. This bibliometric analysis was used to detect the bound Mexican researchers showed the highest international support, as it really is to publish quality in ISI journals. The main finding is that researchers III level, have a low level of ISI publication (annual average of 0.4 articles per researcher), representing the 18% of Mexican publications in the ISI. The UNAM and Cinvestav institutions were more appointments in the Physics Multidisciplinary field.

INTRODUCCIÓN

El Consejo Nacional de Ciencia y Tecnología (Conacyt) es el órgano que gestiona la ciencia en México. Uno de sus programas más importantes es la formación y estímulo de investigadores y tecnólogos. Para promover su formación y desarrollo, creó el Sistema Nacional de Investigadores (SNI), el cual no es más que un evaluador permanente de los investigadores mexicanos y extranjeros que laboran en México a través de una valoración por pares.

En México, existían a 2012 un total de 18,476 miembros del SNI distribuidos en siete áreas del conocimiento: físico matemáticas y ciencias de la tierra; biología y química; medicina y ciencias de la salud; humanidades y ciencias de la conducta; ciencias sociales; biotecnología y ciencias agropecuarias e ingenierías (Foro Consultivo Científico y Tecnológico, AC, 2012). El SNI define tres categorías de investigadores: candidato a investigador nacional; investigador nacional, con tres niveles; e investigador nacional emérito (Diario Oficial, 2012; Conacyt, 2012).

El estudio del SNI se ha abordado desde distintas perspectivas: son abundantes los trabajos reflexivos sobre su operación de Didou y Gérard (2010), Santos (2007), Colado (2003), Barriga (1996) y Malo (1987, 1986). En referencia al rendimiento y la productividad del SNI, sobresale el trabajo de Barriga (1996). Destacan también los análisis de impacto del SNI en un campo específico: en medicina, los trabajos de Alcocer (2004), Barrera (2000) y Zárate (1985); en educación, Ramírez y Weiss (2004); en bioquímica, Rueda (2004); en biomédicas, Cereijido (1992); y en investigación agrícola, Licea de Arenas et al. (2003). En otros temas relacionados con la organización del trabajo y las culturas académicas, podemos citar a Colado (2003), Peña (2001) y Trejo (2001). Son, sin embargo, escasos los trabajos sobre investigadores que ostentan el más alto nivel del SNI (nivel III).

Este artículo se referirá al estudio de la productividad de los investigadores niveles III del SNI. En México, de los 18,476 investigadores, 1,549 son investigadores nivel III, lo que representa 8.38% del total. La distribución espacial de estos investigadores de máxima categoría muestra una concentración muy especial, ya que 63% están concentrados en la ciudad de México y 37%, en los otros 31 estados de la república. Morelos tiene 91; Puebla, 52; Jalisco y Baja California, 44; existen tres estados (Nayarit, Guerrero e Hidalgo) que no cuentan con ninguno. Cuando se analiza la población de investigadores nacionales nivel III por institución, se observa una distribución similar a la anterior, debido a que la UNAM concentra 674 (43.5%) del total, es decir, casi la mitad. Le sigue la red de centros Conacyt (152) y el Cinvestav del Instituto Politécnico Nacional (150). En cuestión de género, 80% (1,238) son hombres y el restante 20%, mujeres (Foro Consultivo Científico y Tecnológico, 2012, pp. 3-5).

Aunque el reglamento del SNI orienta sobre los aspectos a evaluar para conceder sus distinciones, el sistema de evaluación ha recibido críticas por su falta de objetividad en algunas áreas, como por ejemplo la de ciencias sociales, en la que dicha objetividad está mal vista (Rivas, 2012).

Para subsanar estas controversias existen sistemas en la evaluación de la producción y el impacto de la obra científica basados en indicadores. Los indicadores que se usan comúnmente para medir la producción en las actividades de investigación de los científicos, para cualquier país, son: el conteo de los artículos publicados en revistas especializadas y el número de citas de éstos en otras investigaciones. Sin duda, las publicaciones pueden ser valoradas por muchos aspectos y no sólo por las citas y la calidad de la revista. No obstante, dichos indicadores son el comienzo para la evaluación de la productividad, sea lo que ello signifique, no sólo de las instituciones, sino también de los individuos que compiten, cada vez con mayor ferocidad, por la financiación para sus proyectos, o bien, para reclutar y promover a otros investigadores. Debido a esto, y como bien comenta en su estudio Adler, Ewing y Taylor, "los gobiernos e instituciones de todo el mundo ofrecen un considerable apoyo financiero a la investigación científica. Naturalmente, quieren saber que su dinero se está invirtiendo sabiamente, quieren evaluar la calidad de la investigación por la que pagan a fin de tomar decisiones informadas sobre futuras inversiones" (2009, p. 4).

La bibliometría se define como la medición de los textos y de la información (Norton, 2010). Ésta ha jugado un papel muy importante en la evaluación y medición de la producción de conocimiento científico. Entre los instrumentos más utilizados están el análisis de citas (que consiste en contar el número de citas de un documento en particular por un periodo después de su publicación, lo cual a veces se conoce como citas directas), el factor de impacto (es, sin duda, el indicador bibliométrico más popular y controvertido disponible en este momento: fue propuesto por Eugene Garfield [Garfield y Sher, 1963], en colaboración con Irv Sher, para identificar la influencia de las revistas a través de las citas recientes recibidas por otras revistas), el factor H (véase Hirsch, 2005) y, últimamente, la citas en Google Scholar.

Históricamente, los métodos bibliométricos se han utilizado para rastrear citas en las revistas académicas. Sin embargo, hoy la bibliometría puede ser usada para entender el pasado e incluso para la evaluación de la tecnología con el propósito de la previsión tecnológica o inteligencia competitiva (Morris et al., 2002). Los estudios bibliométricos ayudan a explorar, organizar y analizar grandes cantidades de datos históricos que permiten a los investigadores identificar "patrones ocultos" que, a su vez, bien pueden auxiliar a dichos investigadores en la toma de decisiones (Tugrul et al., 2006). Muchos trabajos que utilizaron esta técnica cuantitativa han sido publicados desde entonces, lo cual ha hecho posible analizar e identificar los patrones de publicación de los autores o de las instituciones académicas en diferentes revistas. En consecuencia, los estudios bibliométricos han servido para evaluar la calidad y cantidad de las publicaciones de investigadores, grupos o centros de investigación.

En el contexto nacional no se dispone de bases de datos que pudiesen servir para conocer más a detalle la realidad de la ciencia mexicana (por ejemplo, hoy en día es muy poco probable obtener una base de datos histórica, confiable y consistente de los investigadores no aprobados por el SNI). No obstante, destacan las investigaciones de Collazo y Luna (2002), Collazo, Luna y Vélez (2010), Luna-Morales y Collazo (2007) y Russell, Ainsworth y Narváez (2006), quienes han mostrado en sus trabajos, entre otros resultados, que una aplicación muy importante de la bibliometría ha sido la construcción de clasificaciones para las instituciones y para los autores desde el punto de vista de su productividad, pero hasta el día de hoy no existen estudios que aborden el objeto de este trabajo ni mucho menos que muestren el papel que desempeñan los investigadores del SNI de alto perfil en referencia a la contribución de las investigaciones mexicanas publicadas en el ISI y en relación con la disciplina mexicana, definida por el ISI, más productiva de 1996 a 2003.

Consideramos a los investigadores nivel III porque, con base en el artículo 56 del reglamento vigente del SNI, se les pueden atribuir, por mencionar algunas, las siguientes actividades: la dirección de tesis de posgrado; participar en actividades de divulgación de la ciencia o la tecnología; tener una línea propia de investigación consolidada; realizar investigación que represente una contribución científica o tecnológica trascendente para la generación o aplicación de conocimientos; llevar a cabo actividades sobresalientes de liderazgo en la comunidad científica o tecnológica nacional; contar con reconocimiento nacional e internacional por su actividad científica o tecnológica; y haber desempeñado una destacada labor en la formación de recursos humanos de alto nivel para el país.

En México, es bien sabido que pertenecer al SNI es una distinción que simboliza la calidad y el prestigio de las contribuciones científicas de una persona con vocación investigadora. La política del SNI de conocer y reconocer a los investigadores que demuestran tener una real y verdadera vocación para la investigación en México es, sin duda, adecuada. Sin embargo, se da por entendido, al menos en el contexto científico nacional, que la pertenencia a dicho círculo de investigación implica una calidad, casi inherente y automática, del recurso humano que lo integra. En este contexto nace la motivación de nuestro trabajo de investigación, es decir, conocer el respaldo internacional, mediante publicaciones de calidad en el ISI, que obtienen los investigadores consolidados del SNI, ya que ellos son los responsables de seleccionar a los nuevos miembros de dicho círculo de investigación mexicano.

Reconocemos que existen otros criterios que el programa SNI considera para la evaluación de los investigadores, y que en todo caso también son variables o factores que participan en la aceptación, permanencia o promoción de los investigadores mexicanos más productivos en el SNI. Sin embargo, y como hacemos referencia tan sólo a los investigadores consolidados del SNI, toma sentido comprobar la contribución individual de cada investigador mexicano (con nivel III) mediante sus publicaciones en el ISI.

En este trabajo damos respuesta, principalmente, a tres cuestiones de interés: ¿cuál fue el campo (o los campos) del conocimiento más productivo(s), en términos de las publicaciones del ISI, asociado(s) a las publicaciones de los investigadores mexicanos? Una vez identificado el campo del ISI con mayor concentración de publicaciones mexicanas, damos respuesta a ¿cuáles fueron las instituciones más productivas, según publicaciones del ISI?, y ¿cuáles fueron los investigadores, tanto si pertenecen o no al SNI, más productivos en relación con el total de sus trabajos publicados en el ISI? Este último análisis nos llevó a reconocer a los sujetos de nuestro estudio, quienes son los investigadores del SNI con un nombramiento de nivel III y que llamaremos de manera genérica como "consolidados".

El artículo está dividido en cuatro apartados: en el primero de ellos, describimos el objetivo que se persigue; en el segundo, presentamos la metodología; en el tercero, abordamos los principales resultados, así como una breve discusión de éstos; y en el último, incluimos comentarios a modo de conclusiones.

OBJETIVO

METODOLOGÍA

Los indicadores bibliométricos empleados en este trabajo se basan en el número de publicaciones realizadas en cada campo del conocimiento, el número de citas y el criterio de Bauwens (1998) con base en la información recopilada por el ISI para el periodo 1996-2003. Este criterio es un indicador compuesto que involucra tanto el número de citas como el factor de impacto de cada publicación.

La tabla 1 resume los elementos para construir el criterio de Bauwens y que usaremos a lo largo de este estudio como método de evaluación.

El trabajo analiza cuatro categorías: patrones de las publicaciones mexicanas en el ISI, 1996-2003; contribución y ranking de los investigadores con nivel III del SNI en relación con el total de publicaciones mexicanas en el ISI, 1996-2003; ranking por instituciones y autor individual en Physics-Multidisciplinary, 1996-2003, y ranking por el número de citas en Physics-Multidisciplinary, 1996-2003; y ranking para los niveles III del SNI con publicaciones en el campo Physics Multidisciplinary del ISI, 1996-2003.

Recurrimos al Science Citation Index disponible en la Web of Science del ISI para determinar el número de artículos publicados por investigadores mexicanos durante 1996-2003. Para conocer los patrones de las publicaciones mexicanas en el ISI, contabilizamos aquellos trabajos en los que al menos un investigador aparecía como autor o coautor, y alcanzamos un total de 40,883 registros. Posteriormente, dichos trabajos se ordenaron (el campo definido en la base de datos del ISI para efectuar el ordenamiento fue el denominado SO, el cual considera el nombre completo de la revista en la que se publicó cada trabajo de investigación) para cada año del periodo 1996-2003; de esta manera, obtuvimos las principales disciplinas del ISI en las que publicaron los investigadores mexicanos. Con posterioridad, llevamos a cabo un análisis específico para los investigadores nivel III del SNI, que corresponden a los investigadores que han alcanzado la mayor cualificación científica posible. Examinamos sus contribuciones al ISI y establecimos una clasificación.

En seguida, centramos el análisis bibliométrico para el campo de conocimiento más productivo del ISI (Physics Multidisciplinary) y realizamos un ranking por institución, así como de aquellos investigadores mexicanos más destacados durante el citado periodo de estudio.

4. RESULTADOS Y DISCUSIÓN

Patrones de las publicaciones mexicanas en el ISI, 1996-2003

La participación de todas las publicaciones mexicanas en el ISI fue poco representativa, ya que en ningún año, comprendido de 1996 a 2003, rebasó uno por ciento del total del ISI. La gráfica 1 reporta la evolución tanto de las publicaciones como de las citas, para el concentrado ISI y para México, durante el periodo de estudio. Al comparar la información de las publicaciones mexicanas en el ISI, observamos que dichas publicaciones presentaron un crecimiento más sostenido, de 1996 a 2003, que todas las publicaciones en el ISI; es decir, el total de publicaciones del ISI creció más lentamente que las publicaciones mexicanas difundidas en algunas revistas del ISI. De hecho, estas últimas registraron una tasa de crecimiento promedio anual de 9.3 publicaciones, mientras que para el total ISI dicho indicador fue de 2.3 publicaciones.

Por su parte, los trabajos realizados por al menos un investigador mexicano, y que fueron publicados en el ISI de 1996 a 2003, se concentraron en su mayoría en el campo de la física (tabla 2). En este contexto, la Revista Mexicana de Física encabezó todos los años de dicho periodo de estudio, en cuanto al número de publicaciones se refiere, al captar 44.3% de los 1,958 trabajos publicados en el campo Physics Multidisciplinary. Los trabajos publicados en dicha disciplina del ISI se orientaron ante todo a temas generales de la física o con un enfoque interdisciplinario para la física, incluyendo la física teórica y experimental, así como temas especiales que tienen importancia para diversas aplicaciones de la física (algunas revistas especializadas en un área presentan más de un campo del conocimiento, por lo que se optó por hacer la discriminación utilizando única y exclusivamente la clasificación del apartado Science Citation Index, es decir, utilizando el campo Subject Category-SC).

De las 25,504 citas que se realizaron en el campo del ISI denominado Astronomy & Astrophysics, la revista Astrophysica/ Journa/ registró la mayor participación de ellas, con 37.6%. Por su parte, para el campo denominado Physics Multidisciplinary, la revista que recibió el mayor número de citas fue Physica/ Review Letters, con 47.4% respecto del total de citas recibidas en dicho campo del conocimiento (14,252).

Para los cuatro campos del ISI denominados Physics Multidisciplinary, Astronomy & Astrophysics, Plant Sciences y Optics, que presentaron una continuidad temporal (tabla 3), es de suma importancia mencionar que el campo Plant Sciences fue el que mostró una mayor variación promedio anual en cuanto al número de publicaciones mexicanas del ISI se refiere. Esta variación promedio se incrementó a un ritmo de nueve publicaciones por cada año transcurrido de 1996 a 2003.

En este contexto, el promedio de citas recibidas por publicación para los campos del ISI con mayor concentración de las publicaciones mexicanas, de 1996 a 2003, fue el definido como Astronomy & Astrophysics. No obstante, hay que mencionar que en los dos primeros campos del tabla 3, los trabajos realizados por al menos un investigador mexicano de 1996-2003 dejaron paulatinamente de ser referenciados. Sorprendió que el campo Astronomy & Astrophysics año tras año dejara de percibir el mayor promedio de citas por publicación (siete citas en promedio, cada año por publicación mexicana).

Los resultados obtenidos hasta este momento demuestran que, en el periodo 1996-2003, la investigación mexicana más productiva en el ISI, según el número de publicaciones y total de citas recibidas, fue la que se llevó a cabo en el área de física y, más aún, en los campos Physics Multidisciplinary y Astronomy & Astrophysics. Estos resultados no implican que en dichos campos del ISI se hayan efectuado los trabajos científicos con mejor calidad de los investigadores mexicanos. Sin embargo, son un buen referente para mostrar una tendencia de todos los trabajos mexicanos en el ámbito internacional, al menos de 1996 a 2003. Un indicador de calidad (se sabe que el indicador es espurio, pero se presenta a manera de ejemplo) podría ser el que se muestra en el tabla 4, en el cual simplemente se tomó el cociente de las citas totales realizadas a las publicaciones mexicanas en el ISI (tabla 3) y el número total de publicaciones mexicanas emitidas en cada campo del ISI (tabla 2).

Con base en la información mostrada en el tabla 4, bien podríamos deducir lo siguiente: las publicaciones de mayor impacto internacional, en las que se vieron involucrados los investigadores mexicanos, de 1996 a 2003, se llevaron a cabo en los campos del ISI denominados Astronomy & Astrophysics, Neurosciences y Medicine, General y Internal. Sin embargo, dicho indicador carece de representatividad, debido a que se comparan campos que pertenecen a diferentes áreas temáticas, aunque es interesante observar el nivel de influencia de dichas publicaciones sobre la investigación afín en un momento determinado.

Como ya comentamos, hacemos mención únicamente a esta categoría de investigadores porque, según el reglamento interno del SNI, son investigadores de alto rendimiento en México y, por ende, tienen una línea de investigación consolidada, al menos en el ámbito nacional. Dado que estos investigadores son los que evalúan y deciden, entre otros aspectos, quiénes tienen los méritos para pertenecer a dicho círculo de investigación, es de esperar que dichos evaluadores respalden la toma de sus decisiones con una amplia gama de publicaciones a nivel internacional, a decir, investigaciones de calidad publicadas por algunas revistas del ISI. El tabla 5 contiene la participación de los investigadores nivel III, tanto a escala nacional como en el SNI, de 1996 a 2003.

En este periodo, los investigadores nivel III representaron, en promedio anual, 8.0% de la totalidad de investigadores vigentes en el SNI. Por su parte, dicha participación en el orden nacional fue de 2.5%, en promedio anual, respecto al total de investigadores en equivalente a tiempo completo en México.

Como un investigador vigente del SNI puede estar contabilizado en varios años durante el periodo de estudio, se registraron de 1996 a 2003 un total de 946 investigadores pertenecientes al SNI que ostentaron el nivel III. Para éstos, 25.4% (240) se encontraban en el área (en 1996-1999 en el SNI existían únicamente cuatro áreas del conocimiento; luego se incrementaron a siete, por lo que para estos años se adecuaron las cifras a siete áreas con base en el campo del conocimiento definido por el SNI como "subdisciplina") denominada física-matemáticas y ciencias de la tierra; 19.5% (184), en humanidades y ciencias de la conducta; 17.3% (164), en biología y química; 11.5% (109), en ciencias sociales; 10.8% (102), en ingenierías; 9.3% (88), en medicina y ciencias de la salud; y el restante 6.2% (59), en biotecnología y ciencias agropecuarias.

En cuanto a la participación de todos los investigadores nivel III del SNI (se omitieron los registros para las áreas del conocimiento del SNI llamadas humanidades y ciencias de la conducta y ciencias sociales, debido a que pertenecen a la base de datos del ISI: Social Science Citation Index-SSCI) en el ISI, de 1996 a 2003, en la gráfica 2 mostramos la contribución internacional de dichos investigadores respecto al total de publicaciones ISI.

El resultado obtenido para este tipo de investigadores mexicanos del SNI es poco congruente, ya que se esperaba una mayor contribución de sus publicaciones en el ámbito internacional. Otro resultado de la participación de todos estos investigadores a escala internacional se presenta en el tabla 6, pero ahora por área del SNI.

De dicha información deducimos que, en promedio, cada investigador nivel III del SNI, independientemente del área, contribuyó con 0.8 (550/653) trabajos identificados en el ISI de 1996 a 2003, es decir, con 0.1 trabajos cada año.

Por su parte, los investigadores nivel III -y que fueron encontradas sus publicaciones en el ISI- contribuyeron con 2.9 (550/187) trabajos de 1996 a 2003, es decir, con 0.4 trabajos cada año. Esta categoría de investigadores es estimada por otros aspectos, como la calidad de sus investigaciones, el total de citas a sus publicaciones y su trayectoria académica, entre muchos otros, pero definitivamente no fueron valorados por el respaldo de todas sus publicaciones con carácter internacional.

La participación promedio de los investigadores vigentes en el SNI y con un nivel III (615) respecto al promedio del total de investigadores en México de tiempo completo (24,452), de 1996 a 2003, ascendió a 2.5%. Por su parte, la participación de publicaciones de los investigadores nivel III del SNI, respecto al total de las publicaciones en el ISI, fue simbólica durante dicho periodo, ya que tan sólo representaron 0.01%. Finalmente, las publicaciones de todos los investigadores nivel III del SNI significaron, de 1996 a 2003, 1.5% de todas las publicaciones mexicanas en el ISI.

Estos resultados no fueron aislados, debido a que al efectuar un conteo en la producción científica reportada al SNI por los investigadores vigentes de 1996 a 2003, encontramos que del total de artículos reportados por los investigadores que pertenecieron a este sistema y que, además, fueron publicados por el ISI en dicho periodo, tan sólo 18% fueron realizados por los investigadores nivel III del SNI. Ello implica que 82% de las publicaciones mexicanas en el ISI, de 1996 a 2003 y reportadas por investigadores del SNI, fueron de investigadores con un nombramiento diferente al denominado nivel III.

Este apartado concluye con una serie de tablas (del 7, al 11) (8, 9, 10), por área del SNI e investigador nivel III; en cada uno presentamos un ranking para las instituciones mexicanas y otro por autor individual. En ambos utilizamos el criterio de Bauwens. Estos últimos resultados dan pauta a la elaboración de futuros trabajos concernientes a los investigadores de alto rendimiento pertenecientes al SNI y que permitan conocer más aspectos de su vida productiva.

Ranking por instituciones y autor individual en Physics-Multidisciplinary, 1996-2003

En este apartado presentamos el ranking por instituciones y autor individual del campo denominado por el ISI como Physics Multidisciplinary, que fue el más productivo de 1996 a 2003. Así, en los sucesivos apartados todos los resultados se refieren a esta área de conocimiento y periodo. La evolución de su número de citas y publicaciones se muestra en la gráfica 3.

En el campo Physics Multidisciplinary, a pesar de que el número de publicaciones mexicanas en el ISI se incrementó de 1996 a 2003, el número de citas a dichos trabajos fue decreciendo de manera paulatina. Debe tenerse en cuenta que parte de este descenso final en la citación se debe a que no se consideran las citas que podrían tener las publicaciones más recientes.

Por otro lado, del tabla 12 se deduce que la UNAM registró el mayor número de publicaciones en el ISI, así como la mayor productividad en el número de páginas escritas; en cambio, el Cinvestav, el mayor número de citas recibidas a sus publicaciones, así como el mayor número de investigadores para llevar a cabo sus trabajos.

También del tabla 12 podríamos decir, en primera instancia, que las publicaciones en las que participaron los investigadores del Cinvestav, de 1996 a 2003, reportaron una mayor trascendencia en la comunidad científica, en referencia al campo del ISI definido como Physics Multidisciplinary. Este resultado es cierto si se considera únicamente el número total de citas recibidas a sus trabajos. Sin embargo, en cuanto a la productividad, podemos deducir que el promedio tanto de páginas por autor como de artículos por autor decrece de modo considerable, dado que los investigadores de esta institución se involucraron con un número demasiado elevado de investigadores para divulgar sus trabajos en algunas revistas del ISI.

En referencia a los indicadores de actividad y productividad investigadora, debemos precisar que, por la gran variedad de revistas encontradas en este apartado y puesto que cada una de ellas tiene distinto nivel de calidad, no se pudo definir una revista para estandarizar el número de páginas por publicación. Además, hay que tomar en cuenta que sólo se puede aplicar en aquellas revistas para las cuales están disponibles factores de ajuste del tamaño de página. A esto se suma el hecho de que también se encontraron revistas que dejaron de publicarse poco tiempo después del año de inicio definido por este estudio. Sin embargo, resultaba preciso utilizar algún tipo de ponderación para ordenarlas. Por fortuna, la naturaleza de los datos presentados en el tabla 12 nos permitió hacer uso del criterio propuesto por Bauwens en 1998, en el que se utiliza un indicador compuesto de citas y factor de impacto de las revistas. También, recurrimos a este criterio para darle una mayor representatividad a las instituciones con un considerable número de investigadores involucrados en sus publicaciones.

Así, las revistas incluidas en la categoría superior y en la que publicaron sus trabajos los investigadores mexicanos de 1996 a 2003, según el criterio de Bauwens fueron: Annals of Physics, Europhysics Letters, Physical Review Letters, Physics Letters A, Physics Letters B, Physics Reports-Review Section of Physics Letters y Reports on Progress in Physics. Sin embargo, y como se deduce de la gráfica 4, dichas revistas de arbitraje internacional publicaron tan sólo 31.2% de los trabajos en los que se involucró al menos un investigador mexicano. De las mencionadas revistas con categoría superior, y de acuerdo con el criterio de Bauwens, destacó la participación de la revista Physical Review Letters, con 10.5% del total de publicaciones mexicanas en este campo, de 1996 a 2003.

Según el criterio de Bauwens, la UNAM presentó los elementos necesarios y suficientes para ser considerada como la institución más productiva en esta área de conocimiento y, además, sus trabajos tuvieron una mayor penetración en el ámbito internacional.

Por lo que respecta a los investigadores más productivos, en cuanto al número de publicaciones, el ranking correspondiente, según el criterio de Bauwens, es el que se muestra en el tabla 14. Estos datos hacen suponer que, de manera individual, podría existir una contradicción, ya que se hubiera esperado que el investigador más productivo perteneciera al menos a una de las tres instituciones más productivas del tabla 13, como son la UNAM, el Cinvestav o la Universidad Autónoma Metropolitana (UAM). No obstante, a este nivel de desagregación, el investigador Dvoeglazov, VV, perteneciente a la Universidad Autónoma de Zacatecas (UAZ), fue el más productivo en dicho periodo. Este investigador fue responsable de 43% de trabajos publicados en el ISI que reportaron como institución de adscripción a la UAZ.

La institución a la que pertenecieron en su momento los investigadores mexicanos más productivos, de 1996 a 2003 y en el campo Physics Multidisciplinary, se expone en el tabla 15.

Ranking por el número de citas en Physics-Multidisciplinary, 1996-2003

En este apartado presentamos un ranking para las instituciones, los investigadores y las publicaciones mexicanas que se contabilizaron única y exclusivamente en el campo del ISI denominado Physics Multidisciplinary, basados cada uno de ellos en el total de citas recibidas de 1996 a 2003. La comprensión tradicional de la función de la citación es que la frecuencia con que se cita un documento puede tomarse como una medida del impacto o influencia de dicho documento en la literatura citada (Garfield, 1979).

Es importante destacar que impacto y calidad no son sinónimos. A pesar de que el número de citas que recibe un documento es un indicador de la influencia o impacto que produce su contenido sobre la comunidad científica de una determinada área del conocimiento, hemos observado que muchas publicaciones que reúnen criterios de calidad atendiendo a la opinión de expertos, apenas reciben citas (Zulueta, Cabrero y Bordons, 1999); es decir, producen escaso impacto. En definitiva, hoy se considera que el número de citas que recibe un documento es sólo un indicador parcial de su calidad, y lo que muestra es la visibilidad o difusión del documento en la comunidad científica de cierta área.

Del total de citas recibidas por las publicaciones mexicanas del ISI, 51.95% fueron hechas a publicaciones cuyo país de origen fue Estados Unidos de América; 34.47%m para los Países Bajos; 5.6%, para México; 2.46%, para Francia; 1.23%, para Inglaterra; y el resto, 4.29%, para otros países.

En este contexto, encontramos que la razón del número de citas utilizadas entre el número de citas recibidas fue de 3:1; es decir, por cada cita que recibía una publicación mexicana del ISI, dentro del campo Physics Multidisciplinary y de 1996 a 2003, dicha publicación hacía referencia a tres publicaciones en promedio. Para estas publicaciones mexicanas del ISI, y que fueron difundidas en algunas revistas nacionales, dicha razón fue de 20.6:1. Por su parte, para las publicaciones mexicanas del ISI que publicadas en algunas revistas del extranjero, fue de 2:1. Estos resultados implican que los investigadores mexicanos utilizaron, para este campo de conocimiento del ISI y de 1996 a 2003, en promedio más referencias para apoyar los trabajos que se difundieron en el ámbito nacional y que, en contraparte, los trabajos que se publicaron en revistas extranjeras usaron menos referencias. En consecuencia, los trabajos más originales e independientes de los investigadores mexicanos fueron difundidos en revistas extranjeras, lo que dejó a las nacionales en un segundo plano.

El ranking por institución de México, con base en el total de citas recibidas, se muestra en el tabla 16. Para las dos instituciones con una mayor participación de publicaciones se aprecian dos aspectos importantes: a) el Cinvestav realizó menos publicaciones, pero fueron más citadas; y b) la UNAM efectuó más publicaciones, pero fueron menos citadas. Sin embargo, el promedio de citas a las publicaciones contenidas en este campo del ISI está ligeramente por debajo del promedio de citas a todas las publicaciones mexicanas en el ISI (nueve citas por publicación), de 1996 a 2003.

Al continuar con el análisis de citas, es importante mencionar que los investigadores mexicanos no lograron capitalizar sus trabajos mediante un número considerable de citas. De hecho, 47.9% de estos autores individuales no habían recibido ninguna cita a sus trabajos publicados en el campo Physics Multidisciplinary del ISI, de 1996 a 2003.

Por su parte, los principales investigadores, según el total de citas recibidas a sus publicaciones en Physics Multidisciplinary del ISI, de 1996 a 2003, así como su institución de adscripción se muestran en el tabla 18. Dicha información confirma que el Cinvestav recibió el mayor número de citas en aquellos trabajos publicados de manera conjunta, ya que en ese ranking se hubiera esperado un número considerable de autores individuales pertenecientes a esta institución.

Este último comportamiento no fue aislado, porque del total de citas recibidas para todos los trabajos de los investigadores mexicanos en el ISI, contenidos en el citado campo, de 1996 a 2003, tan solo 9% fueron publicados individualmente; en éstos sobresalió la Universidad Autónoma de San Nicolás de Hidalgo, con un porcentaje relativo de 80%. Esta participación relativa para la Universidad de Sinaloa fue de 69%, para la Universidad de Guadalajara, de 65%; por su parte, la UAM mostró 19%, la UNAM, 11% y el CINVESTAV, 1%.

A pesar de que no se encontró representatividad, en la gráfica 5 se incluyen los principales temas de las investigaciones mexicanas en el ISI, de acuerdo con el mayor número de citas recibidas de 1996 a 2003, tanto para el contexto nacional como para el extranjero.

Ranking para los niveles III del SNI con publicaciones en el campo Physics Multidisciplinary del ISI, 1996-2003

En lo concerniente a los investigadores nivel III pertenecientes al área e físico-matemáticas y ciencias de la tierra del SNI, se contabilizaron 57 publicaciones que se difundieron en el mencionado campo del ISI de 1996 a 2003. La productividad para estos investigadores, de manera individual y por número de publicaciones en el ISI, durante dicho periodo, se refleja en el tabla 19.

En este nivel de desagregación se puede apreciar que, de nueva cuenta, la Revista Mexicana de Física ocupó un lugar muy importante para que los investigadores mexicanos, incluso los consolidados del SNI, difundieran sus trabajos a escala mundial. Si se toma en cuenta el número de publicaciones por autor, entonces el investigador López, G. sería el más productivo. En cambio, si ahora se toma el total de citas a sus trabajos, entonces el investigador más productivo sería Leyvraz, F. Por ello, es importante considerar un criterio que involucre ambos parámetros, como el de Bauwens, ya que, por ser un indicador compuesto, proporciona un ranking más representativo al sopesar ambos argumentos.

Con base en el criterio de Bauwens, presentamos el ranking por institución para los investigadores nivel III del SNI y que difundieron sus investigaciones en el campo Physics Multidisciplinary del ISI de 1996 a 2003 (tabla 20).

La UNAM se posicionó en el primer lugar del ranking para el SNI por instituciones, según el criterio de Bauwens. Este resultado indicó que en dicha institución se encontraron los investigadores con el más alto rendimiento académico de México y que sus trabajos, contenidos en el campo Physics Mutidisciplinary del ISI, tuvieron la mayor trascendencia en el contexto mundial, al menos de 1996 a 2003.

Por su parte, el ranking por autor para esta categoría de investigadores se muestra en el tabla 21. Con base en el criterio de Bauwens, el investigador perteneciente al SNI con mayor productividad y calidad en el mencionado campo del ISI, de 1996 a 2003, resultó ser López, G., quien, a su vez, tuvo como institución de adscripción la Universidad de Guadalajara.

COMENTARIOS A MODO DE CONCLUSIONES

En este artículo hemos identificado patrones muy particulares de las publicaciones mexicanas en el Science Citation Index del ISI, de 1996 a 2003. Gran parte del artículo analiza las publicaciones que se difundieron en la disciplina del ISI con mayor concentración de dichos trabajos mexicanos, es decir, la denominada Physics Multidisciplinary.

En términos globales, las publicaciones mexicanas en el ISI crecieron más que proporcionalmente durante 1996-2003, aunque existe margen para la mejora. Dedicamos especial atención a los investigadores nivel III, con un nivel de publicación ISI escaso (promedio anual de 0.4 artículos por investigador), lo cual representó sólo 18% de todas las publicaciones mexicanas en el ISI. Asimismo, presentamos los rankings por investigador e institución para las diferentes áreas de conocimiento.

El artículo focaliza el análisis en los trabajos difundidos por el ISI, de 1996 a 2003, en el citado campo y en donde se involucró, al menos, un investigador mexicano. La participación de los trabajos mexicanos en el ISI no superó el uno por ciento en cada año comprendido por dicho periodo ni tampoco se capitalizó un número considerable de citas.

Los resultados para las publicaciones mexicanas en el campo Physics Multidisciplinary en el mencionado periodo muestran que la UNAM presentó el mayor número de publicaciones, así como la mayor productividad en el número de páginas escritas. Por su parte, el Cinvestav registró el mayor número de citas recibidas a sus publicaciones. Sin embargo, este centro contabilizó el mayor número de investigadores por publicación del ISI. Con base en el criterio de Bauwens, se identificó que la UNAM fue la institución más productiva de 1996-2003 y sus trabajos tuvieron una mayor penetración en el ámbito internacional. También, según el criterio de Bauwens, destacaron las publicaciones mexicanas en la revista Physical Review Letters, con 10.5% respecto del total de publicaciones mexicanas en el campo Physics Multidisciplinary del ISI.

En el contexto de citas a las investigaciones mexicanas en el multicitado campo, de 1996 a 2003, encontramos que dichas publicaciones tuvieron un impacto poco significativo en el contexto mundial, es decir, fueron poco referenciadas en otras investigaciones internacionales. Más aún, las revistas del ISI que se editaron en México lograron captar tan solo 5.6% del total de citas a los trabajos mexicanos y que fueron publicados en dicha disciplina del ISI. En contraparte, las revistas que no se editaron en México captaron 94.4% del total de dichas citas. Tal vez, ello se deba a que una gran cantidad de estos trabajos (44.3%) se concentró en una sola revista editada en México, a decir, la Revista Mexicana de Física.

El ranking por institución de México, a partir del total de citas recibidas en el campo Physics Multidisciplinary del ISI, de 1996 a 2003, mostró que el Cinvestav llevó a cabo menos publicaciones, pero fueron más citadas y que la UNAM realizó más publicaciones, pero fueron menos citadas. Sin embargo, el promedio de citas a todas las publicaciones contenidas en este campo del ISI estuvo por debajo del promedio de citas a todas las publicaciones mexicanas en el ISI, al menos de 1996 a 2003. En este periodo, los investigadores mexicanos que publicaron en el campo Physics Multidisciplinary no lograron capitalizar sus trabajos mediante un número considerable de citas. De hecho, y al momento de este estudio, 47.9% de estos autores individuales no habían contabilizado ninguna cita en sus trabajos publicados.

Con base en el criterio de Bauwens, elaboramos rankings para las instituciones e investigadores mexicanos que registraron publicaciones en el campo Physics Multidisciplinary del ISI, de 1996 a 2003. Este nivel de desagregación se efectuó, por una parte, para los investigadores nivel III con registro vigente en el SNI y en cada una de las siete áreas de este sistema y, por otra, para los investigadores en la disciplina del ISI denominada Physics Multidisciplinary. Esto, sin duda, deja para trabajos a futuro la realización de estudios más a detalle de los demás campos del conocimiento que presentamos en este artículo.

Por último, a pesar de que no existe ningún reconocimiento ni mucho menos un estímulo económico por parte del SNI hacia sus investigadores más productivos, este trabajo conducirá a métodos más sofisticados, como el análisis de co-citación, la cartografía de la literatura, el acoplamiento bibliográfico y al análisis de co-pa-labra. Estos métodos, de manera individual y en combinación, son más sensibles para encontrar patrones de información, así como la frecuencia de palabras, que, en combinación con el análisis estadístico, asegurarán resultados más robustos.

REFERENCIAS BIBILIOGRÁFICAS

Adler, R., Ewing, J. & Taylor, P. (2009). Citation statistics. A report from the International Mathematical Union (IMU) in cooperation with the International Council of Industrial and Applied Mathematics (ICIAM) and the International Council of Institute of Mathematical Statistics (IMS). Statistical Science, 24(1), 1-26.         [ Links ]

Alcocer, J. (2004). Los investigadores de los institutos nacionales de salud. Sus avatares dentro del Sistema Nacional de Investigadores. Revista de Investigación Clínica; Instituto Nacional de Ciencias Médicas y Nutrición Salvador Zubirán, 56(3), 391-398.         [ Links ]

Barrera, H. (2000). To be or not to be en el SNI. La importancia del Sistema Nacional de Investigadores. Medicina Universitaria, 2(7). Recuperado de http://www.imbiomed.com/1/1/articulos.php?id_revista=86&id_ejemplar=1049        [ Links ]

Barriga, A. (1996). Los programas de evaluación (estímulos al rendimiento académico) en la comunidad de investigadores. Un estudio en la UNAM. Revista Mexicana de Investigación Educativa, 1(2), 408-423.         [ Links ]

Bauwens, L. (1998). A New Method to Rank University Research in Economics in Belgium. CORE, mimeo.         [ Links ]

Cereijido, M. (1992). El Sistema Nacional de Investigadores (SNI): reflexiones de un evaluador del área biomédica. Avance Perspectiva, 10, 324-331.         [ Links ]

Colado, E. (2003). Capitalismo académico y globalización: la universidad reinventada. Revista Educação e Sociedade, 24(84), 1059-1067.         [ Links ]

Collazo, F. (2004). Índice mexicano en ciencias: desarrollo y aplicaciones, trabajo aceptado para ser presentado como cartel en el II Seminario Internacional sobre Estudios Cuantitativos y Cualitativos de la Ciencia y la Tecnología, Prof. Gilberto Sotolongo Aguilar. La Habana, Cuba.         [ Links ]

Collazo, F. & Luna, M. (2002). Física mexicana de partículas elementales: organización, producción científica y crecimiento. Interciencia, 27(7), 347-353.         [ Links ]

Collazo, F., Luna, M. & Vélez, G. (2010). Surgimiento de las prácticas científicas de colaboración en la ciencia mexicana con cobertura en los índices internacionales. Revista Hispana para el Análisis de Redes Sociales, 19(7), 143-167.         [ Links ]

Conacyt (2012). Criterios internos de evaluación del SNI. Recuperado de http://www.conacyt.gob.mx/SNI/SNI_CriteriosInternosdeEvaluacion/Paginas/default.aspx        [ Links ]

Diario Oficial (2012). Acuerdo por el que se reforman diversos artículos del reglamento del Sistema Nacional de Investigadores. Recuperado de http://www.conacyt.gob.mx/SNI/Documents/Reglamento_2013.pdf        [ Links ]

Didou, S. & Gérard, E. (2010). El Sistema Nacional de Investigadores, veinticinco años después: la comunidad científica, entre distinción e internacionalización. México: ANUIES.         [ Links ]

Faber, T. (2005). A bibliometric analysis of economics journals. Journal of Documentation, 61(3), 385-401.         [ Links ]

Foro Consultivo Científico y Tecnológico, AC (2012). Consulta para proponer investigadores elegibles a renovar las comisiones dictaminadoras del Sistema Nacional de Investigadores. Recuperado de http://www.foroconsultivo.org.mx/home/index.php/academicos/comisiones-sni        [ Links ]

Garfield, E. (1979). Citation indexing: Its theory and application in science, technology and humanities. Nueva York: John Wiley y Sons, Inc.         [ Links ]

Garfield, E. & Sher, I. (1963). New Factors in the Evaluation of Scientific Literature, Through Citation Indexing. American Documentation, 4 (18), 195-201.         [ Links ]

Hirsch, J. (2005). An index to quantify an individual's scientific research output. Proceedings of the National Academy of Sciences USA, 102, 16569-16572.         [ Links ]

Licea de Arenas, J. et al. (2003). La investigación agrícola en México. Un estudio bibliométrico con enfoque de género. Anales de Documentación, 6,145-154.         [ Links ]

Luna-Morales, M. & Collazo, F. (2007). Análisis histórico bibliométrico de las revistas latinoamericanas y caribeñas en los índices de la ciencia internacional: 1961-2005. Revista Española de Documentación Científica, 30(4), 523-543.         [ Links ]

Malo, S. (1987). El Sistema Nacional de Investigadores en 1986: fin de una etapa. Ciencia y Desarrollo, 13(74), 59-78.         [ Links ]

----------(1986). El Sistema Nacional de Investigadores. Ciencia y Desarrollo, 12(67), 55-73.         [ Links ]

Morris, C. et al. (20 02). DIVA: A visualization system for exploring document databases for technology forecasting. Comput. Ind. Eng., 43, 841-862.         [ Links ]

Norton, M. (2010). Introductory concepts in information science. 2a. ed. Medford, NJ: Information Today Inc.         [ Links ]

OECD (2005). Main Science and Technology Indicators 2005-2.         [ Links ]

Peña, M. (2001). Organización del trabajo y culturas académicas. Estudio de dos grupos de investigadores de la Universidad de Guadalajara. Revista Mexicana de Investigación Educativa, 6(11), 79-93.         [ Links ]

Ramírez, R. y Weiss, E. (2004). Los investigadores educativos en México: una aproximación. Revista Mexicana de Investigación Educativa, 9(21), 501-513.         [ Links ]

Reyes, G. & Suriñach, J. (2012). Las evaluaciones internas del SNI: coherencias o coincidencias. Revista Secuencia, 83, 181-217.         [ Links ]

Rivas, L. (2012). Entrevista al director del SIN, Dr. José Luis Fernández Zayas realizada el 10 de diciembre de 2012.         [ Links ]

Rueda, M. (2004). La evaluación de la relación educativa en la universidad. Revista Electrónica de Investigación Educativa, 6(2). Recuperado de http://redie.uabc.mx/vol6no2/contenido-rueda.html        [ Links ]

Russell, J., Ainsworth, S. & Narváez-Berthelemot, N. (2006). Colaboración científica de la Universidad Nacional Autónoma de México (UNAM) y su política institucional. Revista Española de Documentación Científica, 29(1), 56-73.         [ Links ]

Santos, L. (2007). Un análisis de la política de ciencia y tecnología en México (2001-2006). Estudios Sociales: Revista de Investigación Científica, 16(30),135-165.         [ Links ]

Trejo, R. (2001). Vivir en la sociedad de la información: orden global y dimensiones locales en el universo digital. Revista Iberoamericana de Ciencia, Tecnología, Sociedad e Innovación. Recuperado de http://www.oei.es/revistactsi/index.html        [ Links ]

Tugrul, U. et al. (2006). Forecasting emerging technologies: Use of bibliometrics and patent analysis. Technological Forecasting y Social Change, 73, 981-1012.         [ Links ]

Zárate, M. (1985). The institute's researchers representation in the Sistema Nacional de Investigadores. Archivos de Investigación Médica, 16(4), 317-321.         [ Links ]

Zulueta, M., Cabrero, A. & Bordons, M. (1999). Identification and study of research teams through bibliometric indicators. Revista Española de Documentación Científica, 22(3), 333-347.         [ Links ]

Nota

¹ El doctor Reyes agradece todo el apoyo proporcionado por el Conacyt para la elaboración de este artículo.