Читать книгу La evaluación de los académicos - Gonzalo Varela - Страница 4

Introducción

En este libro se recoge el resultado del trabajo en torno a la problemática involucrada en la evaluación académica a los individuos que un equipo de investigadores, convocado en 2014 por el Foro Consultivo Científico y Tecnológico (FCCyT), realizó como parte de un programa más amplio vinculado a la evaluación en el sistema de ciencia, tecnología y educación superior. Por su parte, el FCCyT celebró en esa oportunidad un convenio con la Universidad Autónoma Metropolitana, Unidad Xochimilco (UAM-X) para contar con su apoyo en el desarrollo de la investigación. El equipo responsable se ha nutrido de las reflexiones del subgrupo de investigadores que colaboró en diversas fases de este proyecto centrado en los procesos de evaluación al individuo (EI), sobre todo en la etapa de formulación del estudio; los autores reconocen su valiosa participación.[1] Por último, hacemos una mención especial de la Dra. Gabriela Dutrénit Bielous, que en esa fecha tenía a su cargo la Coordinación General del FCCyT.

El diseño y la realización de la investigación, el análisis de resultados y la integración final del libro quedaron a cargo de las coordinadoras y el equipo de investigación, mismos que se ocuparon de redactar los capítulos como queda señalado enseguida. Gonzalo Varela, con el apoyo de Natalia Grass, elaboró el capítulo I. Graciela Bensusán, Giovanna Valenti y Carlos Erwin Rodríguez integraron el II. Este último autor fue también responsable del procesamiento de los datos y del capítulo III. El IV fue realizado por Graciela Bensusán y Giovanna Valenti, con el apoyo de Natalia Grass. El V lo escribió Graciela Bensusán y el VI, Giovanna Valenti. Las conclusiones fueron elaboradas por las dos coordinadoras y Gonzalo Varela. Daniel Inclán apoyó la investigación en cuanto al trabajo de campo. Cabe señalar que miembros del equipo, como en el caso de Gonzalo Varela y Natalia Grass, participaron en la organización de algunos de los grupos de discusión, los cuales fueron responsabilidad de Graciela Bensusán y Giovanna Valenti.

A treinta años de haberse creado el Sistema Nacional de Investigadores (SNI) y de que las instituciones de educación superior y centros de investigación comenzaran a buscar mecanismos para reconocer y estimular a los académicos para mejorar sus ingresos con base en el desempeño, es necesario hacer un alto en el camino. En un escenario de constante crecimiento de las formas de evaluación y de los individuos evaluados, es imperativa su revisión considerando su evolución y relaciones internas, así como demás alternativas de evaluación institucional (posgrados, proyectos, etc.). Parte de la inquietud proviene de la manera en que la evaluación académica se ha venido desarrollando y adaptando y de la pregunta sobre si el cambio de contexto respecto del que existía en 1984, conservando en lo fundamental el diseño original de los mecanismos de evaluación, ha generado problemas en el funcionamiento de estos últimos, o si aquel era lo suficientemente flexible como para responder a las nuevas exigencias de individuos, instituciones y del país. Estas inquietudes ya eran parte de la discusión en diversos foros y tenían respuestas parciales en otras investigaciones.[2] Evaluados y evaluadores, funcionarios y expertos habían expresado sus opiniones, pero estas no estaban integradas. Por ello, se consideró que era preciso pasar a una etapa de validación y sistematización de la información para obtener una base objetiva de análisis y comprender mejor el efecto de la evaluación en el desempeño de los académicos, en sus percepciones y en los problemas que conlleva para el futuro quehacer de investigación y docencia.

Es así que un equipo de investigadores convocado en 2014 por el FCCyT, como parte de un programa más amplio vinculado a la evaluación en el sistema de ciencia, tecnología y educación superior, emprendió un estudio en torno a la problemática involucrada en la evaluación académica a los individuos. Los resultados se recogen en esta obra. Dicho equipo contó con el apoyo de personal del FCCyT que participó durante la etapa de formulación del estudio y la aplicación de la Encuesta FCCyT 2014 a investigadores SNI. Los autores de este libro les reconocen su valiosa participación.[3]

Igualmente se hace un reconocimiento especial a los más de ocho mil investigadores del SNI que contestaron total o parcialmente el cuestionario de la citada encuesta y a los más de cien participantes en los grupos de discusión y en las entrevistas individuales realizadas entre 2015 y 2016.

El objetivo del equipo de trabajo se orientó inicialmente a la elaboración de un diagnóstico de las percepciones de evaluados y evaluadores sobre el estado actual de los procesos de EI asociados a los instrumentos de la política de ciencia y tecnología y de educación superior. La intención fue identificar los principales problemas que la comunidad percibía en el diseño e implementación de los instrumentos de evaluación, procurando detectar las interacciones entre estos. Con esa base se pretendía proponer distintas recomendaciones que, sin dejar de admitir el carácter sistémico de los mecanismos, ayudaran a revertir gradualmente los posibles efectos negativos de la evaluación y potenciar los positivos, incrementando de ese modo la legitimidad, pertinencia y eficacia de la EI.

En suma, la investigación se concentró en los problemas detectados por la comunidad en el proceso de evaluación, en los efectos de este y en las posibles soluciones, con la guía de las siguientes interrogantes:

 — ¿Los mecanismos y procesos de evaluación instalados desde la década de 1980 están alineados con los cambios que se han dado en la producción del conocimiento y la evolución de los contextos institucional, nacional y mundial?

 — ¿Cuánto y de qué manera la política de evaluación orientó el desempeño de los académicos?

 — ¿Es posible afirmar que la evaluación de los académicos, tal y como se aplica en el país, ha llegado a su límite, o se trata más bien de introducir ajustes?

 — ¿Cuáles serían los límites desde la percepción de la comunidad científica?

 — ¿Cuáles serían los ajustes necesarios, desde la percepción de la comunidad científica?

 — ¿Qué muestra el análisis documental sobre los límites y ajustes?

 — ¿Existe superposición o complementariedad en los dos tipos de evaluación de los académicos: SNI e institucional?

 — ¿Es posible homologar criterios y procedimientos para el conjunto de la comunidad científica? ¿Cuáles serían las principales especificidades a tomar en cuenta?

 — ¿Cuáles son los límites de continuar con la imbricación entre la política salarial y las políticas de educación superior y ciencia y tecnología basadas en la evaluación ligada a la complementariedad de ingresos?

Aunque en principio el propósito era diagnosticar cada uno de los mecanismos de evaluación al individuo —SNI, evaluación en la institución de adscripción y Programa de Mejoramiento del Profesorado (PROMEP)—, el estudio terminó enfocándose en el SNI y en su interacción con la evaluación de los académicos en sus instituciones de adscripción. Para reforzar el análisis de los resultados obtenidos con la encuesta aplicada a miembros del SNI, se llevó a cabo una aproximación cualitativa con académicos, lo que fue complementado revisando la documentación que acompaña las evaluaciones de las IES y el SNI, concretamente en su parte de definición de criterios y procedimientos mediante reglamentos y tabuladores.

Si bien no se emprendieron estudios de caso en profundidad en las IES e institutos de salud por limitaciones de tiempo y recursos, la discusión con grupos de investigadores de algunas de estas instituciones y las entrevistas individuales permitieron conocer sus percepciones sobre la interacción que se viene discutiendo.

Los principales instrumentos que se utilizaron para delimitar la problemática y diagnosticar la percepción de la comunidad académica sobre la EI fueron la revisión de la literatura sobre el tema, el diseño y aplicación de una encuesta de opinión dirigida a una muestra representativa de los investigadores del SNI y la realización de grupos de discusión y entrevistas individuales con evaluados y evaluadores de diversas instituciones y regiones. Hay que decir que estos son los sujetos más evaluados en el medio académico, ya que por lo general participan en al menos dos mecanismos de evaluación (en el SNI y en la institución de adscripción), además de que lo cumplen periódicamente y a lo largo de su trayectoria. Es decir, se trata de un grupo siempre sujeto al escrutinio de las instancias de evaluación, por lo que los hallazgos y propuestas resultantes de esta investigación no responden a modelos preconcebidos fuera del ámbito académico. Por el contrario, se basan en la amplia experiencia de los investigadores como sujetos evaluados y evaluadores —en el SNI, en sus instituciones, en revistas arbitradas, en programas de posgrado y los proyectos del Consejo Nacional de Ciencia y Tecnología (Conacyt) en sus diversas modalidades, entre otros.

Sin embargo, faltan más elementos para validar las conclusiones y recomendaciones que surgieron de esta investigación. En especial se deberían contrastar las percepciones recogidas en este estudio con las trayectorias de los investigadores del SNI y de otros que no pertenecen al sistema, tomando en cuenta sus etapas y resultados. De esta forma, sería posible evaluar el desempeño real y los efectos de los mecanismos de la EI en relación con sus objetivos originales y a los que se les fueron asignando a lo largo de los últimos treinta años. Lamentablemente, esta cuestión estuvo fuera del alcance de este equipo de investigación, al menos en esta etapa.

Luego de esta introducción, los resultados de investigación se han organizado en este libro como se describe enseguida.

En el capítulo I se recuperan los antecedentes del debate nacional e internacional sobre los temas asociados a la evaluación académica de los individuos, los cuales provienen tanto de la literatura especializada como de la prensa nacional. En el II se detalla la metodología utilizada en sus dimensiones cuantitativa y cualitativa. El tercer capítulo está dedicado a la descripción de las estadísticas básicas del SNI mientras que los resultados de la encuesta aplicada a los miembros del SNI vigentes y no vigentes, más las opiniones vertidas en los grupos de discusión y en las entrevistas individuales se incluyen en el capítulo IV.

Por su parte, en el capítulo V se revisan los requisitos establecidos para ingresar y permanecer en las diversas categorías del SNI y la relación de esto con los criterios específicos de evaluación —que son complementarios al Reglamento del SNI—, en las siete áreas que lo integran, así como su evolución reciente. El propósito de este capítulo es triple: a) evalúa en qué medida los criterios de dictaminación por áreas presentan diferencias entre sí al determinar la cantidad o calidad de los productos a evaluar, cuestión que se relaciona con las diferentes percepciones recogidas en la encuesta y con los grupos de discusión según las diferentes disciplinas; b) examina cómo estos criterios interpretan los requisitos reglamentarios: ¿restringen, amplían o precisan los requisitos reglamentarios?, y c) analiza en qué medida las opiniones de los investigadores incluidas en este estudio —publicado en la página web del FCCyT desde 2014— han sido atendidas en las respectivas reformas de dichos instrumentos y cuáles podrían considerarse en otras futuras.

El capítulo VI se dedica al análisis de la relación entre los sistemas de evaluación institucional y el SNI a la luz de diferentes situaciones donde ambos interactúan de modo complementario y se combinan de distintas maneras o, por el contrario, se encuentran del todo desvinculados. Además se abordan las modalidades y problemáticas de la evaluación institucional derivando de ello algunas de las recomendaciones.

Finalmente, el capítulo VII del libro contiene las conclusiones y recomendaciones.