ESTUDIOS / RESEARCH STUDIES

¿EXISTE RELACIÓN ENTRE EL TAMAÑO DEL GRUPO DE INVESTIGACIÓN Y SU RENDIMIENTO CIENTÍFICO? ESTUDIO DE CASO DE UNA UNIVERSIDAD ESPAÑOLA

Álvaro Cabezas-Clavijo*, Evaristo Jiménez-Contreras*, Emilio Delgado López-Cózar*

* EC3: Evaluación de la Ciencia y de la Comunicación Científica, Departamento de Información y Comunicación, Universidad de Granada

Correos-e: acabezasclavijo@gmail.com; evaristo@ugr.es; edelgado@ugr.es

IS THERE A RELATION BETWEEN SIZE AND SCIENTIFIC PERFORMANCE OF RESEARCH GROUPS? A SPANISH UNIVERSITY AS A CASE STUDY

CONTENIDOS

1. INTRODUCCIÓN Top

Una de las características distintivas de la ciencia desde el siglo XX es el salto desde la labor individual de los científicos al trabajo en colaboración. Aunque no de forma exclusiva, dicho quehacer se ha articulado principalmente a través del grupo de investigación. Este nivel de análisis ha sido, sin embargo, frecuentemente ignorado en los análisis bibliométricos, que han fijado más el foco en el rendimiento de unidades como departamentos o universidades, probablemente por la dificultad de contar con censos de grupos de investigación y la imposibilidad de recuperar este dato a partir de los campos de afiliación de las bases de datos internacionales, ya que los investigadores no suelen consignarlo. No hay que olvidar, sin embargo, que un investigador pasa una parte importante del tiempo trabajando con sus colaboradores más inmediatos dentro del grupo de investigación. Lee y Bozeman (2005Lee, S.; Bozeman, B. (2005). The impact of research collaboration on scientific productivity. Social Studies of Science, 35 (5), 673-702.) sobre una muestra de académicos norteamericanos cifran en un 51% el tiempo invertido en investigación con los miembros del propio grupo. Esta importancia del grupo de investigación también se percibe hoy día a través de su presencia web, ya que, en el caso de las universidades españolas, casi la tercera parte de los URLs pertenecen a los grupos de investigación (Orduña-Malea, 2011Orduña-Malea, E. (2011). Propuesta de un modelo de análisis redinformétrico multinivel para el estudio sistémico de las universidades españolas. Universidad Politécnica de Valencia. [Tesis doctoral].). Este trabajo, pues, se centra en el grupo de investigación al tratarse de la principal unidad ejecutora de la investigación en los centros de I+D, y particularmente en las universidades (von Tunzelmann y otros, 2003von Tunzelmann, N.; Ranga, M.; Martin, B.; Geuna, A. (2003). The Effects of Size on Research Performance: A SPRU Review.).


Pese a la dificultad en encontrar una definición de consenso para grupo de investigación (Rey-Rocha y otros, 2008Rey-Rocha, J.; Martin-Sempere, M. J.; Sebastián, J. (2008). Estructura y dinámica de los grupos de investigación. Arbor, 184 (732), pp. 743-757.), podemos seguir a estos autores cuando afirman que “un grupo de investigación es una asociación estable, aunque dinámica, en torno a una línea de investigación, de personal de investigación generalmente de una misma institución, que comparte el mismo sentido de pertenencia y mantiene unas relaciones basadas en las interacciones y la colaboración permanente”. Esta definición pone de manifiesto que un grupo de investigación no lo forman únicamente los investigadores seniores del grupo, sino también el personal en formación, técnicos o colaboradores del mismo. Sin embargo, desde el punto de vista de la medición bibliométrica es complejo determinar el rol que desempeñan estas figuras, por lo que es frecuente estudiar el rendimiento únicamente de los miembros de mayor rango académico del grupo (von Tunzelmann y otros, 2003von Tunzelmann, N.; Ranga, M.; Martin, B.; Geuna, A. (2003). The Effects of Size on Research Performance: A SPRU Review.).


La definición citada señala también la importancia de los aspectos sociales en la configuración de un grupo de investigación, que se conforman libremente y de mutuo acuerdo entre los propios investigadores. La pertenencia a un grupo de investigación se identifica con una serie de factores tanto sociales como de índole científica, y que pueden redundar en el rendimiento del mismo. Así, uno de los factores que se relacionan con el grupo de investigación es su grado de cohesión interna. El sentido de pertenencia, la identidad, el auto reconocimiento y un cierto sentimiento de fidelidad son algunas de las características que permiten identificar a los grupos cohesionados (Rey-Rocha y otros, 2008Rey-Rocha, J.; Martin-Sempere, M. J.; Sebastián, J. (2008). Estructura y dinámica de los grupos de investigación. Arbor, 184 (732), pp. 743-757.). En este sentido, autores como Etzkowitz (1992Etzkowitz, H. (1992). Individual investigators and their research groups. Minerva, 30 (1), pp. 28-50.) califican de cuasi-familiar la relación que se produce en los laboratorios de muchos grupos de investigación, dada la cantidad de tiempo que se trabaja y las relaciones que surgen entre los miembros. La intensidad emocional, la confianza mutua y la reciprocidad en las relaciones son otros de los factores personales que deben existir para que dos investigadores establezcan un vínculo fuerte entre ellos (Granovetter, 1973Granovetter, M. S. (1973). The strength of weak ties. American Journal of Sociology, 78 (6), pp. 1360-1380.), si bien no todas las relaciones que se establecen entre los miembros de un grupo de investigación son de esta naturaleza. 


En la literatura se han descrito múltiples factores que pueden afectar el rendimiento del grupo de investigación, siendo la relación entre el tamaño de los grupos y la productividad uno de los aspectos más estudiados. En su revisión, Cohen (1991Cohen, J. E. (1991). Size, age and productivity of scientific and technical research groups. Scientometrics, 20 (3), pp. 395-416.) no encuentra que haya un tamaño óptimo para un grupo de investigación, ya que detecta como la producción total de los grupos crece de manera lineal respecto al tamaño de éstos, manteniéndose inmutable la producción per cápita. Señala asimismo que uno de los elementos clave es cómo medir la productividad. Usando la coautoría como elemento discriminador de los grupos, Seglen y Aksnes (2000Seglen, P.; Aksnes, D. W. (2000). Scientific productivity and group size: A bibliometric analysis of Norwegian microbiological research. Scientometrics, 49 (1), pp. 125-143.) llegaron a la misma conclusión en su estudio de la microbiología noruega. Aunque con el aumento del tamaño de grupo, aumentaba su output global, la productividad per cápita de los miembros se mantenía constante. En el informe técnico de la SPRU (Science and Technology Policy Research) británica (von Tunzelmann y otros, 2003von Tunzelmann, N.; Ranga, M.; Martin, B.; Geuna, A. (2003). The Effects of Size on Research Performance: A SPRU Review.) sin embargo se encuentran evidencias de que para grupos de investigación pequeños, la productividad llega a su máximo cuando se alcanzan las cinco personas, manteniéndose una ratio constante a partir de dicho tamaño. Johnston (1994Johnston, R. (1994). Effects of resource concentration on research performance. Higher Education, 28 (1), pp. 25-37.) por su parte afirma que para competir a nivel internacional el tamaño de grupo mínimo, entendido este como el de los científicos de mayor grado científico, estaría entre cuatro y seis, que deberían acompañarse de aproximadamente otras cuatro personas entre personal técnico y becarios. Así, pues existen evidencias contradictorias acerca del efecto del tamaño del grupo de investigación en el rendimiento investigador. El estudio de la SPRU advierte de otros factores influyentes en la productividad de los grupos, como las diferencias de tamaño que pueden producirse entre disciplinas, la edad de los investigadores o la financiación que consiguen los grupos de investigación. En el estudio de Dundar y Lewis (1998Dundar, H.; Lewis, D. R. (1998). Determinants of research productivity in higher education. Research in Higher Education, 39 (6), pp. 607-631.) destinado a medir los factores que afectan a la productividad científica en los departamentos de las instituciones de educación superior, se asevera que el tamaño del departamento es un factor crítico en cuanto a la investigación ya que el mayor tamaño de éste se relaciona con una mayor productividad per cápita. Esta circunstancia redundaría en un mayor poder interno en la institución, lo que se podría traducir en más y mejores recursos para la investigación; en este caso el tamaño seria un método indirecto para la consecución de recursos humanos, económicos y materiales, para la investigación, además sería un factor de atracción de potenciales colaboradores, lo que conduciría a una mayor productividad de estos departamentos. Otros factores identificados en dicho trabajo como influyentes en la productividad son el disponer de un alto porcentaje de profesores catedráticos así como contar con una ratio elevada de profesores en el departamento dedicado a tareas investigadoras.

Respecto a la relación entre tamaño de grupo y visibilidad e impacto de la investigación, es llamativo que esta relación se ha estudiado mucho menos que la existente entre tamaño y productividad. Así, algunos trabajos publicados se han centrado en estudiar la ventaja acumulativa en los grupos de investigación, hallando que son los grupos menos productivos los que parecen verse más beneficiados por el aumento del tamaño, si bien en estos trabajos el tamaño se mide por la producción total y no por el número de miembros que componen el grupo (van Raan, 2006van Raan, A. F. J. (2006). Performance-related differences of bibliometric statistical properties of research groups: Cumulative advantages and hierarchically layered networks. Journal of the American Society for Information Science and Technology, 57 (14), pp. 1919-1935.). Por su parte, desde un punto de vista matemático (Kenna y Berche, 2011Kenna, R.; Berche, B. (2011). Critical mass and the dependency of research quality on group size. Scientometrics, 86 (2), pp. 527-540.; Kenna y Berche, 2012Kenna, R.; Berche, B. (2012). Managing research quality: critical mass and optimal academic research group size. IMA Journal of Management Mathematics, 23 (2), pp. 195-207.) se ha hallado que existe un tamaño óptimo para los grupos de investigación, y que éste presenta importantes oscilaciones en función de la disciplina. Estos autores afirman que la calidad de los grupos aumenta con su tamaño, hasta alcanzar un determinado umbral en el que los grupos son tan grandes que se subdividen actuando en la práctica como si fueran varios. Hay que señalar que en estos análisis no se emplea el concepto de calidad o impacto desde un punto de vista bibliométrico sino desde la visión del análisis de expertos.


En clave nacional, no son muchas las evaluaciones bibliométricas centradas en grupos de investigación. Cabe citar los trabajos de Rey-Rocha que miden la relación entre la consolidación de los grupos de investigación y su productividad para Biología y Biomedicina (Rey-Rocha y otros, 2006Rey-Rocha, J.; Garzón-García, B.; Martin-Sempere, M. J. (2006). Consolidación y cohesión de los equipos de investigación del CSIC y su influencia sobre la actividad investigadora y el rendimiento de sus componentes: Área de Biología y Biomedicina. Informe CSIC, 153 pp.) y más recientemente para Química (Rey-Rocha y otros, 2010Rey-Rocha, J.; Garzón-García, B.; Martin-Sempere, M. J. (2010). Consolidación y cohesión de los grupos de investigación del CSIC y su influencia sobre la actividad investigadora y el rendimiento de sus componentes: Área de Ciencia y Tecnologías Químicas. Informe CSIC, 109 pp.). En estos estudios se identifican las ventajas e inconvenientes de formar parte de un grupo de investigación consolidado o no consolidado. Entre las ventajas que citan los miembros de grupos consolidados se encuentran el intercambio de conocimientos; la amplitud de objetivos y líneas; la mejor organización, gestión, coordinación y/o planificación del grupo; la mayor productividad, rendimiento y competitividad; así como la mayor facilidad para obtener recursos humanos y económicos. Por su parte los inconvenientes señalan la menor libertad, autonomía e independencia del individuo, los problemas personales y el ambiente de trabajo y se centran asimismo en el tamaño y composición del equipo. Es decir, las ventajas se concentran en el plano científico, mientras que los inconvenientes apuntan más a una vertiente personal y social en la dinámica del grupo de investigación. En un trabajo previo del mismo autor centrado en la Geología (Rey-Rocha y otros, 2002Rey-Rocha, J.; Martín-Sempere, M. J.; Garzon, B. (2002). Research productivity of scientists in consolidated vs. non-consolidated teams: The case of Spanish university geologists. Scientometrics, 55 (1), pp. 137-156.), se mide la relación entre la productividad y el grado de consolidación de los grupos hallando que, más que el tamaño total del grupo, el factor diferenciador relacionado con la productividad es el número de personas dentro del mismo que alcanzan una posición estable y segura. Combinando técnicas cualitativas (encuestas) y bibliométricas en una muestra de geólogos españoles, los autores llegan a la conclusión que los grupos consolidados tienden a ser más numerosos, básicamente por contar con un mayor número de doctores, así como más productivos per cápita que los no consolidados. Formulan la hipótesis de que el mayor grado de consolidación que se produce en los grupos de más tamaño conduce a una mayor posibilidad de establecer colaboraciones con otros grupos lo que en última instancia favorecería una mayor productividad. En este sentido, parece indudable que la capacidad de atracción de recursos humanos y financiación, así como las posibilidades para personal en formación de trazar una carrera científica exitosa son mayores en un grupo consolidado. No hay que olvidar que uno de los factores esenciales en el otorgamiento de becas de formación de personal investigador es el currículo vitae del investigador principal y de su grupo de investigación. En la misma línea, Martín-Sempere y otros (2008Martín-Sempere, M. J.; Garzón-García, B.; Rey-Rocha, J. (2008). Team consolidation, social integration and scientists’ research performance: An empirical study in the Biology and Biomedicine field. Scientometrics, 76 (3), pp. 457-482.) analizan la relación entre la consolidación de los equipos de investigación y la integración de los científicos en dichos grupos con diversos factores como la productividad, la colaboración o las patentes solicitadas. Los autores concluyen que los niveles más altos de integración en grupos consolidados se relacionan con una mayor productividad, así como con una participación más elevada en proyectos de investigación, y con un mayor número de tesis dirigidas. Sin embargo, cuando se trata de determinar el impacto de dichos grupos, son tanto en Biología-Biomedicina como en Química los no consolidados (grupos de menor tamaño) los que presentan mayores índices de impacto. Dicho de otra manera, los grupos más pequeños y menos productivos parecen rendir mejor en términos de visibilidad de la investigación que los grupos más grandes y más productivos (Rey-Rocha y otros, 2006Rey-Rocha, J.; Garzón-García, B.; Martin-Sempere, M. J. (2006). Consolidación y cohesión de los equipos de investigación del CSIC y su influencia sobre la actividad investigadora y el rendimiento de sus componentes: Área de Biología y Biomedicina. Informe CSIC, 153 pp.; Rey-Rocha y otros, 2010Rey-Rocha, J.; Garzón-García, B.; Martin-Sempere, M. J. (2010). Consolidación y cohesión de los grupos de investigación del CSIC y su influencia sobre la actividad investigadora y el rendimiento de sus componentes: Área de Ciencia y Tecnologías Químicas. Informe CSIC, 109 pp.). 
Por su parte, también dentro del territorio español, se han realizado estudios sobre los grupos de investigación en la Comunidad Valenciana (García-Aracil y otros, 2006García-Aracil, A.; Gracia, A. G.; Pérez-Marín, M. (2006). Analysis of the evaluation process of the research performance: An empirical case. Scientometrics, 67 (2), pp. 213-230.) analizando los factores que influyen en la concesión de la mención de excelencia, así como sobre la eficiencia de los equipos andaluces en el área de Tecnologías de la Información y Comunicación, usando técnicas de análisis envolvente de datos (Pino-Mejías y otros, 2010Pino-Mejías, J.; Solís-Cabrera, F.; Delgado-Fernández, M.; Barea-Barrera, R. (2010). Evaluación de la eficiencia de grupos de investigación mediante análisis envolvente de datos (DEA). El Profesional de la Información, 19 (2), pp. 160-167.).

Así pues, la escasez de análisis que toman como caso de estudio los grupos de investigación españoles, unido a las evidencias contradictorias en lo que respecta a la relación entre rendimiento científico y tamaño del grupo de investigación, y la constatación de posibles diferencias entre disciplinas son las principales razones que justifican este análisis.

2. OBJETIVOS Top

El objetivo principal de este estudio es determinar si existe relación entre el tamaño del grupo de investigación y el rendimiento académico de sus componentes tanto para los indicadores absolutos como para los indicadores relativizados. Del mismo modo, dado los diferentes patrones de comportamiento bibliométrico que operan en las diferentes áreas del conocimiento (González-Albo y otros, 2012González-Albo, B.; Moreno, L.; Morillo, F.; Bordons, M. (2012). Indicadores bibliométricos para el análisis de la actividad de una institución multidisciplinar: el CSIC. Revista Española de Documentación Científica, 35 (1), pp. 9-37.), se quiere calibrar si esta relación es generalizada o si es un hecho que se detecta únicamente en alguna de ellas. Esta información es relevante para la toma de decisiones dentro de las instituciones de educación superior, especialmente a la luz de la creciente importancia de los rankings universitarios que cada vez determinan en mayor grado la política científica de los centros de investigación. 


Para responder a estas preguntas, se ha tomado como caso de estudio la Universidad de Murcia, una institución de carácter multidisciplinar (excluyendo las enseñanzas politécnicas) y de rendimiento medio, según los diferentes rankings de producción e impacto investigador (Torres-Salinas y otros, 2011Torres-Salinas, D.; García-Moreno-Torres, J.; Robinson-García, N.; Delgado-López-Cózar, E.; Herrera, F. (2011). Rankings ISI de las universidades españolas según campos y disciplinas científicas (2a ed. 2011). El profesional de la información, 20 (6), pp. 701-709.; Buela-Casal y otros, 2011Buela-Casal, G.; Bermúdez, M. P.; Sierra, J. C.; Quevedo-Blasco, R.; Castro, A.; Guillén-Riquelme, A. (2011). Ranking de 2010 en producción y productividad en investigación de las universidades públicas españolas. Psicothema, 23 (4), pp. 527-536.), que bien puede ser representativa de una importante parte de las universidades españolas.


3. MATERIAL Y MÉTODOS
 Top

Se ha realizado un estudio seccional descriptivo retrospectivo del rendimiento bibliométrico de los grupos de investigación de la Universidad de Murcia activos al menos durante un año para el periodo 2005-2009, excluyendo los pertenecientes al área de Humanidades (n=258). Éstos se descartaron debido a la escasa representatividad de la producción recogida en la base de datos usada como fuente del estudio, así como a la inexistencia de factores de impacto calculados para las revistas de Humanidades y de indicadores de citas para el área en su conjunto. Se ha realizado un abordaje del grupo de investigación input-based (Cohen, 1991Cohen, J. E. (1991). Size, age and productivity of scientific and technical research groups. Scientometrics, 20 (3), pp. 395-416.), bajo el que se registra la actividad científica de todos los miembros explícitamente declarados de una estructura administrativa con funciones investigadoras. En este caso es imprescindible contar con un censo previo de grupos de investigación y de sus integrantes. Esta perspectiva determinada por cuestiones administrativas se acerca más a los objetivos de la política científica, ya que a menudo es este nivel de agregación el que se considera a efectos de financiación de la investigación en estructuras universitarias o regionales. Para dicha población de grupos de investigación se calcularon dos indicadores de producción, dos de visibilidad y dos de impacto. Estos seis indicadores se pueden dividir entre indicadores absolutos, es decir, aquéllos que no están relativizados y por tanto, están influidos por el tamaño del grupo, e indicadores relativos, que en principio no están afectados por el tamaño de éste. 


La información científica para realizar los cálculos bibliométricos se extrajo de las bases de datos ISI Web of Science, considerada la fuente más representativa para realizar estudios bibliométricos, por su selectividad y su carácter multidisciplinar, si bien presenta varias limitaciones, como la diferente cobertura según áreas temáticas (Moed, 2005Moed, H. F. (2005). Citation analysis in research evaluation. Dordrecht: Springer.), el sesgo anglosajón (van Leeuwen, 2001van Leeuwen, T.; Moed, H.; Tijssen, R.; Visser, M. (2001). Language biases in the coverage of the Science Citation Index and its consequences for international comparisons of national research performance. Scientometrics, 51 (1), pp. 335-346.) o la falta de normalización en los nombres de los autores (Ruiz-Pérez y otros, 2002Ruiz-Pérez, R.; Delgado-López-Cózar, E.; Jiménez-Contreras, E. (2002). Spanish personal name variations in national and international biomedical databases: implications for information retrieval and bibliometric studies. Journal of the Medical Library Association, 90 (4), pp. 411-430.). Así, se descargaron todos los registros para el periodo 2005-2009 mediante la ecuación de búsqueda [(Murcia or Cartagena) and Spain], seleccionándose para el estudio únicamente las tipologías documentales artículo, revisión, carta y nota, consideradas tradicionalmente como ítems citables, e identificadas como las más relevantes en las evaluaciones bibliométricas (Schubert y otros, 1989Schubert, A.; Glänzel, W.; Braun, T. (1989). A comprehensive set of indicators on 2649 journals and 96 countries in all major science fields and subfields 1981-1985. Scientometrics, 16 (1-6), pp. 3-478.). Dicha producción se revisó y filtró, descartándose los trabajos no vinculados a las personas censadas en los grupos de investigación de la Universidad de Murcia. 


Hay que señalar que se realizó un acercamiento bottom-up de manera que la producción y actividad se asignó a cada investigador de forma individual. Esto se realizó incluso si el investigador no consignaba la afiliación institucional de la Universidad de Murcia en su firma en el artículo, hecho muy común sobre todo en investigadores con doble afiliación hospitalaria y universitaria. Seguidamente se descargó la información de las revistas agrupadas en los Journal Citation Reports (JCR) calculando asimismo el cuartil de cada revista para cada año y categoría donde ésta estuviera indizada. Igualmente se consignaron las citas de los artículos objeto de estudio; dicha búsqueda se realizó en febrero de 2011 para toda la producción, de manera que la ventana de citación es variable en función del año de publicación, y disponiendo por tanto los trabajos de más antigüedad de más tiempo para ser citados. 


Los datos acerca de los grupos de investigación y la composición de cada uno de ellos fueron descargados desde la aplicación CURIE de la Universidad de Murcia, realizando actualizaciones anuales para dar cabida a los nuevos grupos, así como reseñando las altas y bajas de personal en los mismos. Toda esta información se integró en una única base de datos en formato MS Access 2003. 


Los indicadores utilizados fueron:


PROD: Producción de los miembros del grupo de investigación, usando el método de recuento total.


PROD PER CAPITA: Producción per cápita del grupo de investigación. Se obtiene dividiendo el total de producción por el promedio de miembros anual del grupo.


Q1: Número de trabajos en revistas del primer cuartil, según la ordenación por factor de impacto para cada una de las categorías y año.


PORC_Q1: Porcentaje de trabajos en revistas del primer cuartil. 


CITAS: Número total de citas recibidas por todos los trabajos de cada grupo de investigación.


CITAS_NORM: Valor de citas normalizado para cada grupo de investigación. El procedimiento de normalización de citas se realizó tomando como base la información de los Essential Science Indicators (ESI) a fecha enero de 2011, cubriendo el periodo temporal 2000-2010. A cada uno de los grupos de investigación se le clasificó en una de las 22 áreas definidas por ESI. Posteriormente para cada trabajo se dividió el número de citas reales recibidas por el valor correspondiente a su área científica y año. De este modo un valor de 1 correspondería al promedio mundial para su área y año. Finalmente se calculó el valor de citas normalizado para cada grupo de investigación. 


El cálculo de los indicadores se realizó con MS Access 2003 mientras que para el análisis estadístico se ha usado el paquete informático SPSS en su versión 20.0. Además del cálculo de estadísticas descriptivas, el análisis estadístico se complementó con la prueba de Kruskal-Wallis. Dicho test es un estadístico no paramétrico, usado cuando las desviaciones estadísticas de las diferentes muestras son heterogéneas, y permite verificar si existen diferencias estadísticamente significativas entre ellas. 


Los datos se relativizaron por el número de catedráticos de universidad, titulares de universidades, profesores contratados doctores y profesores ayudantes doctores del grupo. Estas escalas han sido las únicas contempladas ya que son las únicas donde es requisito indispensable ser doctor, y por tanto, tener encomendadas labores investigadoras. Así pues, siguiendo las directrices de von Tunzelmann y otros (2003von Tunzelmann, N.; Ranga, M.; Martin, B.; Geuna, A. (2003). The Effects of Size on Research Performance: A SPRU Review.), que afirman la dificultad de medir adecuadamente la labor del personal sin dedicación investigadora, se descartó usar el número total de componentes del grupo como medida del mismo, dada la naturaleza dinámica del propio grupo de investigación (Johnston, 1994Johnston, R. (1994). Effects of resource concentration on research performance. Higher Education, 28 (1), pp. 25-37.) con numeroso personal transitorio (becarios, técnicos) unidos temporalmente al grupo de investigación y que pueden distorsionar los resultados, especialmente en aquéllos de mayor tamaño. En el caso que nos ocupa, además el hecho de que la fuente de datos incluya a los colaboradores de cada grupo (miembros de otras instituciones) añade mayor dificultad a la hora de computar su producción. De este modo, el tamaño (T) medio del grupo se calcula realizando el promedio anual de dichos miembros doctores. 


Por su parte, los grupos de investigación se clasificaron en cinco áreas de investigación. Se trata de una clasificación ad-hoc realizada a partir de las áreas de investigación existentes en la universidad objeto de estudio. Las cinco áreas son Física-Química (área 1), Recursos Naturales (incluyendo Biología Vegetal y Animal, Bioquímica y Veterinaria, área 2), Medicina Clínica y Salud (área 3), Matemáticas-Tecnologías de la Información y Comunicación (TIC) (área 4) y Ciencias Sociales (incluye Economía, Psicología, Educación y Otras Ciencias Sociales, área 5). 


Para la categorización de los grupos en función del tamaño, se tomó la población de grupos de investigación para cada una de las áreas y se calcularon los indicadores de tercer cuartil estadístico, mediana y primer cuartil estadístico del promedio anual de miembros doctores, al objeto de clasificar los grupos de investigación en cuatro categorías aproximadamente iguales para cada área. De este modo, los grupos clasificados como A son los grupos de mayor tamaño, los grupos B presentan un tamaño medio-alto, los grupos C un tamaño medio-bajo y los grupos D son los grupos más pequeños de la población estudiada.


4. RESULTADOS
 Top

La tabla I muestra la distribución de los 258 grupos de investigación según áreas científicas, así como los estadísticos relativos al tamaño de cada grupo de investigación. El área con mayor número de grupos es Ciencias Sociales, con un tercio de los grupos analizados, seguida de Recursos Naturales, con el 24,8% de los casos estudiados. El área más pequeña, con 19 grupos es el que abarca a las disciplinas de Matemáticas, y Tecnologías de la Información y Comunicación (TIC). El número medio de doctores por grupo se sitúa en 3,3 personas para el conjunto de los grupos de investigación, marcando Matemáticas-TIC (4,3) y Medicina Clínica-Salud (2,7) los valores promedio máximos y mínimos respectivamente. Hay que resaltar asimismo que en cuatro ocasiones (una en Recursos Naturales, dos en Medicina Clínica-Salud y una en Ciencias Sociales), se detectaron grupos sin ningún miembro en las escalas de catedrático, profesor titular, contratado doctor o ayudante doctor. Estos grupos se consideraron en el análisis de los diferentes indicadores.


En función del tamaño de los grupos de investigación, éstos se han agrupado en cuatro categorías, siendo los grupos A los de mayor tamaño y los D, los que menor número de componentes presentan. La tabla II muestra el número de grupos y el porcentaje que representan por áreas y categorías, así como el tamaño necesario para formar parte de cada una de las agrupaciones. La categoría D presenta el mayor número de grupos, 72, que significan el 27,9% del total analizado mientras que los grupos de mayor tamaño constituyen la categoría más pequeña, representando el 22,9% de casos estudiados. En cuanto al número de miembros de los grupos, existen diferencias significativas entre algunas de las categorías, marcando Matemáticas-TIC (5,7) y Física-Química (5) los valores más elevados para ser categorizados como A, y Ciencias Sociales (4) y Medicina-Clínica-Salud (3) los umbrales más bajos. A efectos prácticos, un grupo con un promedio de 4,2 miembros doctores (T=4,2) estaría categorizado como B (tamaño medio-alto) en Física-Química, Recursos Naturales y Matemáticas-TIC mientras que en Medicina Clínica-Salud y en Ciencias Sociales, se clasificaría como grupo A (tamaño alto).


En la tabla III se señalan los indicadores absolutos de producción, visibilidad e impacto para cada una de las categorías definidas. En lo que respecta al indicador de producción total del grupo de investigación, la media se sitúa en 14,1 artículos por grupo, siendo muy inferior este promedio en Ciencias Sociales respecto al resto de áreas científicas. En todos los casos, salvo en Medicina Clínica-Salud (área 3), los grupos de mayor tamaño (A) presentan indicadores significativamente más elevados que el resto de categorías En el caso de esta área son los grupos clasificados como B (tamaño medio-alto) los que presentan una ratio superior, aunque con una desviación típica muy elevada. El segundo indicador mostrado, el número de trabajos en revistas del primer cuartil por categorías JCR también señala la asociación entre tamaño de grupo y rendimiento, tanto a nivel global como por áreas científicas. La única salvedad se localiza en el área 2 (Recursos Naturales), donde los grupos de tamaño medio-bajo (C) presentan una ratio ligeramente superior a la de los grupos de tamaño medio-grande (B). Por su parte, el número total de citas cosechado por grupo de investigación señala la misma tendencia. Los grupos A presentan de media casi 160 citas, frente a las algo más de 100 de los grupos B, las 72,9 menciones de los grupos de tamaño medio-bajo (C), y las 34,6 citas de los grupos pequeños (D). Como excepción, hay que señalar de nuevo en el área de Recursos Naturales (área 2) la mejor ratio de los grupos C sobre los B, y en el caso de Medicina Clínica-Salud el valor más elevado que presentan los grupos B sobre los A, si bien como se ha comentado previamente con una alta desviación estadística sobre los valores medios de la categoría. 


Por su parte, los indicadores relativos de producción, visibilidad e impacto señalan escasas diferencias entre los grupos de distinto tamaño (tabla IV). Así, en el indicador de producción per cápita, son, a nivel general los grupos de tamaño medio-alto (B) los que presentan el indicador más elevado (5,0). Si se ahonda en cada una de las áreas científicas, los grupos B presentan el mejor dato en todas las áreas, salvo en Recursos Naturales (área 2), donde dominan los grupos de tamaño medio-bajo (C). Por su parte, en las áreas de Matemáticas-TIC (área 4) y Ciencias Sociales (área 5) esta ratio es idéntica a la de los grupos de mayor tamaño (A). En lo que respecta al indicador de visibilidad, porcentaje de trabajos en revistas del primer cuartil, son los grupos de mayor tamaño (A) los que señalan el mejor dato, con un 36,6% de sus trabajos en dichas publicaciones de prestigio. El segundo mejor dato promedio lo presentan los grupos más pequeños, con un 29,4% de artículos en revistas de alta visibilidad, si bien con un dato que apenas supera ligeramente a las otras dos categorías de grupos. En el análisis por áreas, se detectan patrones muy diferenciados. Por un lado, tanto en Física-Química (área 1) como en Ciencias Sociales (área 5), el mayor tamaño del grupo se asocia con una mayor ratio de publicación en revistas de alta visibilidad, mientras que en Matemáticas-TIC (área 4), esta relación es inversa, es decir, son los grupos más pequeños los que muestran la mayor eficiencia en publicación en revistas de prestigio. En las dos restantes áreas no se detectan tendencias claras. Finalmente, el indicador de citas normalizadas señala a los grupos de tamaño alto (A) y medio-bajo (C) como los únicos que alcanzan los promedios mundiales de citación. Sin embargo, el valor que alcanzan los grupos de tamaño medio-bajo (C) está muy determinado por los valores extremos de Física-Química (3,3), y que se refleja en una elevadísima desviación típica sobre los valores medios. Excluyendo el área de Ciencias Sociales, que queda muy alejado de los promedios mundiales de citación, en el resto de áreas, los grupos de mayor tamaño (A) presentan valores medios siempre por encima de la ratio mundial, algo que no ocurre en las restantes categorías. 


La prueba de Kruskal-Wallis permite contrastar si existen diferencias estadísticamente significativas entre k muestras independientes. En este caso las muestras son los indicadores alcanzados por cada una de las cuatro tipologías de grupo definidas en función de su tamaño (tabla V). Dicho test señala cómo existen diferencias estadísticamente significativas a nivel global para las tres variables absolutas calculadas (p<0,05) así como para la mayor parte de áreas. La excepción se encuentra en el área Matemáticas-TIC (área 4), donde las diferencias no son significativas en el caso de la publicación en revistas del primer cuartil, y lo son en cuanto al número total de citas con p<0,1. En cuanto a los valores relativos encontramos diferencias significativas en cuanto al valor de citas normalizadas con un intervalo de confianza (CI) del 95%, mientras que estas diferencias también son significativas para el porcentaje de trabajos en revistas del primer cuartil para CI=90%. Si se ahonda en las diferentes áreas, en la mayoría no se producen diferencias significativas entre grupos de diferente tamaño. Las salvedades se producen en cuanto al indicador de porcentaje de trabajos en revistas del primer cuartil en el área de Medicina Clínica y Salud, y en el área de Ciencias Sociales, donde se dan diferencias estadísticamente significativas en los tres indicadores relativos con un intervalo de confianza del 95%. 


5. DISCUSIÓN Y CONCLUSIONES
 Top

El presente estudio se ha focalizado en un aspecto muy determinado de la actividad investigadora a nivel micro, como es la relación entre el número de miembros de los grupos de investigación y su relación con los parámetros bibliométricos. Existen otros factores que pueden afectar al rendimiento del grupo de investigación y que no se han estudiado en este trabajo tales como la escala profesional del investigador principal del grupo, el sexo, la edad, las relaciones que se establecen entre los componentes del grupo de investigación, o el acceso a equipos o material técnico especializado, entre otros. Asimismo el análisis se ha centrado en una única universidad, por lo que hay que ser precavido a la hora de hacer extensibles estos resultados de forma global a los grupos universitarios españoles, y tomar estos resultados solo a modo indicativo. Del mismo modo, hay que señalar otras limitaciones como la inclusión únicamente de artículos internacionales, lo que puede afectar sobre todo a grupos de Ciencias Sociales que pueden tener en la publicación en revistas nacionales o en monografías su vía de expresión principal. En definitiva esta aportación debe entenderse como una propuesta metodológica para aproximarse a algunas de las variables principales, si bien no las únicas, que afectan al estudio de los grupos de investigación. Igualmente, a la hora de interpretar estos datos hay que tener muy en cuenta que dentro de cualquier universidad española conviven grupos con un alto rendimiento con otros grupos de rendimiento medio o bajo, como se desprende de las elevadas desviaciones de la media en algunas áreas halladas en este estudio. Para el sistema español se podría aplicar la máxima que se expone para Italia (Abramo y otros, 2011Abramo, G.; Cicero, T.; D’Angelo, C. A. (2011). The dangers of performance-based research funding in non-competitive higher education systems. Scientometrics, 87 (3), pp. 641-654.) y es que existen mayores diferencias entre los grupos dentro de la propia universidad que entre las distintas universidades, por lo que una de las primeras políticas a aplicar por cualquier institución sería la de identificar y monitorizar el rendimiento de dichos grupos de investigación a fin de establecer incentivos adecuados de cara a su mejora.


Los resultados hallados señalan para el caso de los indicadores absolutos la dependencia del tamaño del grupo de investigación. Esto no es una sorpresa ya que cuanto mayor es el número de investigadores del equipo de investigación, mayor posibilidad de producir trabajos, de publicarlos en revistas de alta visibilidad, y de recibir citas por ellos. Así, los grupos de mayor tamaño presentan unos indicadores absolutos que multiplican por un factor de entre 4,6 y 5 (en función del indicador considerado) el valor de los grupos de menor tamaño. Estos resultados son estadísticamente significativos salvo en el caso de Matemáticas-TIC donde el tamaño no parece ejercer un efecto en líneas generales sobre dichos indicadores. 


En cuanto a los resultados en los indicadores relativos, el análisis señala que a nivel general el tamaño del grupo no afecta la productividad de éste, mientras que la eficiencia en la publicación en revistas del primer cuartil, y las citas recibidas ajustadas por trabajo y área sí se ven influidas por el tamaño del equipo de investigación. Estos resultados sin embargo están plenamente condicionados por el comportamiento de las Ciencias Sociales, que representan un tercio de los grupos de investigación estudiados, ya que a nivel de área, sólo en ésta, y en Medicina Clínica y Salud (porcentaje en revistas del primer cuartil), afecta el tamaño del grupo. 


Un análisis más pormenorizado de los resultados en Ciencias Sociales señala que los indicadores y patrones que se producen en el área se alejan de lo hallado en los restantes campos científicos. En dicha área, la producción científica internacional es escasa, y también son muy bajos los indicadores de visibilidad e impacto. Por el contrario, existe un elevado número de grupos de investigación que no presentan producción internacional, y que por tanto también muestran indicadores de visibilidad e impacto iguales a cero. Dichos grupos, que tienden a concentrarse en la categoría D, esto es, son de muy pequeño tamaño (presentan como máximo 1,8 investigadores por año), ejemplarizan la atomización de la investigación en Ciencias Sociales. Esta atomización parece afectar de forma negativa al área, ya que la productividad y visibilidad internacional de estos grupos es escasa o nula. El hecho de que sean los grupos de mayor tamaño los que muestran una mayor productividad y eficiencia en la publicación señala que son dichos equipos de investigación los que están adoptando en mayor medida un patrón de publicación internacional. Nuestros datos no permiten afirmar de manera fehaciente la causa de esta mayor eficiencia de los grupos de mayor tamaño, aunque podría relacionarse con el concepto de masa crítica necesaria para ser competitivos internacionalmente. Este factor puede jugar un papel más importante en los grupos de Ciencias Sociales dado el menor número de colaboraciones que se producen en el área respecto a las ciencias básicas. Igualmente, estos datos son significativos de cara a la realización de una política científica que en dicha área prime la agregación de investigadores dentro de un grupo de investigación, si bien existen riesgos de que se formen grupos “administrativos” o artificiales, carentes de factores sociales tales como integración o cohesión grupal, que juegan un papel relevante en el desempeño del grupo de investigación (Rey-Rocha y otros, 2008Rey-Rocha, J.; Martin-Sempere, M. J.; Sebastián, J. (2008). Estructura y dinámica de los grupos de investigación. Arbor, 184 (732), pp. 743-757.). 


En el resto de áreas sin embargo hay escasa evidencia de que incentivar grupos de investigación de tamaño elevado redunde en una mejora de la productividad y eficiencia de sus miembros, por lo que se hace necesario buscar otros factores que expliquen el mejor desempeño de unos grupos de investigación sobre otros. No hay que obviar, sin embargo, que son los grupos de mayor tamaño los que generan el mayor output científico de una institución (los grupos A producen el 40,7% de los artículos científicos en este estudio), por lo que una opción dentro de la política científica podría ser incidir en mejorar la eficiencia en términos de visibilidad e impacto de los grupos de investigación más prolíficos.


En cualquier caso, no hay que perder de vista que las recompensas en la ciencia española se basan no tanto en la eficiencia, sino principalmente en el cumplimiento o superación de unos umbrales mínimos de publicación, y que esta evaluación se realiza a nivel individual, no de grupo de investigación (Fernández-Esquinas y otros, 2006Fernández-Esquinas, M.; Pérez-Yruela, M.; Merchán-Hernández, C. (2006). El Sistema de Incentivos y Recompensas en la Ciencia Pública Española. En: Sebastián, J.; Muñoz, E. (eds.), Radiografía de la investigación pública en España. Madrid: Biblioteca Nueva.). Así ocurre con los sexenios de investigación otorgados por la Comisión Nacional Evaluadora de la Actividad Investigadora (CNEAI), en que se someten cinco trabajos a evaluación (Ruiz-Pérez y otros, 2010Ruiz-Pérez, R.; Delgado-López-Cózar, E.; Jiménez-Contreras, E. (2010). Principios y criterios utilizados en España por la Comisión Nacional Evaluadora de la Actividad Investigadora (CNEAI) para la valoración de las publicaciones científicas: 1989-2009. Psicothema, 22 (4), pp. 898-908., Ministerio de Educación, 2011Ministerio de Educación (2011). Resolución de 30 de noviembre de 2011, de la Secretaría General de Universidades, por la que se fija el procedimiento y plazo de presentación de solicitudes de evaluación de la actividad investigadora a la Comisión Nacional Evaluadora de la Actividad Investigadora.) o en la promoción académica en la universidad española que fija un número de publicaciones mínimo en función de la escala a la que aspira el candidato (ANECA, 2008ANECA (2008). Principios y Orientaciones para la Aplicación de los Criterios de Evaluación.). Sin embargo, superado estos umbrales, los investigadores disponen de escasos incentivos para aumentar su productividad y visibilidad. Así pues, desde un punto de vista individual a un investigador le podría compensar formar parte de un grupo de elevado tamaño sobre uno pequeño, ya que en éste dispondrá de más oportunidades para realizar artículos de investigación, publicarlos en revista de alta visibilidad y recibir recompensas académicas por ello. 


Finalmente, es capital la realización de más estudios bibliométricos con enfoque en la política científica, tanto a nivel meso (Filippo y otros, 2012Filippo, D. de; Casani, F.; García-Zorita, C.; Efraín-García, P.; Sanz-Casado, E. (2012). Visibility in international rankings. Strategies for enhancing the competitiveness of Spanish universities. Scientometrics.; Docampo y otros, 2012Docampo, D.; Herrera, F.; Luque-Martínez, T.; Torres-Salinas, D. (2012). Efecto de la agregación de universidades españolas en el Ranking de Shanghai (ARWU): caso de las comunidades autónomas y los campus de excelencia. El Profesional de la información, 21 (4), pp. 428-432.) como micro (Costas y Bordons, 2005Costas, R.; Bordons, M. (2005). Bibliometric indicators at the micro-level: Some results in the area of natural resources at the Spanish CSIC. Research Evaluation, 14 (2), pp. 110-120.; Costas y otros, 2010Costas, R.; Van Leeuwen, T. N.; Bordons, M. (2010). A bibliometric classificatory approach for the study and assessment of research performance at the individual level: the effects of age on productivity and impact. Journal of the American Society for Information Science and Technology, 61 (8), pp. 1564-1581.) que identifiquen los factores que influyen en el rendimiento de los agregados de investigación, a fin de que las instituciones puedan adoptar medidas que contribuyan a aumentar no sólo la productividad de la investigación en las universidades, sino especialmente su visibilidad e impacto internacional.


7. BIBLIOGRAFÍATop