Evaluación de estudiantes y calidad docente en la Universidad de Santiago de Compostela: propuestas de mejora

Evaluación dE EstudiantEs y calidad docEntE En la univErsidad dE santiago dE compostEla: propuEstas dE mEjora mónica porto currás departamento de didáctica y organización Escolar Facultad de Educación universidad de murcia resumen En este artículo presentamos una síntesis de algunas de las conclusiones a las que llegamos tras el análisis de percepciones de estudiantes y directores de departamento de la universidad de compostela sobre la forma en que se entiende y desarrolla la evaluación de estudiantes. situándonos en un enfoque interpretativo-etnográfico, creemos que conocer en qué aspectos coinciden las percepciones de colectivos tan distintos como los de estudiantes y directores de departamento de diferentes áreas de conocimiento nos puede ofrecer pistas para identificar algunas de las claves culturales presentes en la evaluación de estudiantes, al mismo tiempo que nos aporta información muy valiosa sobre algunos de sus puntos fuertes y de sus debilidades a tener en cuenta en cualquier intento de mejora de la calidad docente. abstract in this article, we present a synthesis of the conclusion that we come with the analysis of perceptions of students and department directors about the students’ evaluation in santiago de compostela university. We believe that to know in which aspects are agree the perceptions of groups as different as students and department directors could give us trails for identify some of the culture keys of the students’ evaluation, at the same time that it provides valuable information about some of the strong and weak points to take into account for improve the quality of university teaching. revista de Enseñanza universitaria 2005, n.º 26; 7-17 7 Mónica Porto Currás 8 información, proponemos alternativas de mejora. En este artículo presentamos una primera síntesis de las principales conclusiones a las que hemos llegado, organizando esta información en torno a tres grandes preguntas: 1. ¿Es la evaluación de estudiantes un indicador de calidad relevante? 2. ¿Está contribuyendo la evaluación de estudiantes a la mejora de la calidad docente de la usc? 3. ¿Qué hacer para mejorar? 1. ¿Es la Evaluación dE EstudiantEs un indicador dE calidad rElEvantE? desde el inicio de esta investigación hemos pretendido enmarcar este trabajo sobre la evaluación de estudiantes en la actual investigación sobre el proceso de evaluación de la calidad de las universidades. por supuesto, no obviamos que para conocer la calidad de la docencia habría que atender a otros indicadores y no quedarse únicamente con la información sobre la evaluación de estudiantes, pero con la información obtenida sobre este proceso hemos constatado que: 1. no existe coordinación ni debates en los departamentos sobre temas docentes. la coordinación que sería necesaria para poder desarrollar un plan de estudios coherente, organizado y estructurado, durante los últimos cinco años (20002005) nos ha preocupado conocer cómo es la realidad de la evaluación de estudiantes que se realiza en la universidad de santiago de compostela, ya que creemos que analizar cómo se realiza esta evaluación en cada universidad (en qué aspectos se están centrando, qué metodologías utilizan, qué opinan profesores y estudiantes sobre la forma en que se desarrolla, etc.), y contrastar esta información con lo que actualmente se defiende desde la literatura especializada, es un valioso indicador de la calidad de la enseñanza universitaria toda vez que proporciona información muy útil para conocer algunos de sus puntos fuertes y débiles y hacer propuestas de mejora. consecuentemente, hemos realizado una investigación1 contextualizada en el marco de la evaluación de la calidad de la enseñanza universitaria, ya que partimos de la convicción de que conocer cómo se realiza la evaluación de los estudiantes nos puede ofrecer información relevante para mejorar la calidad de la enseñanza y de la universidad en conjunto. para ello, hemos estudiado las percepciones de estudiantes y de directores de departamentos universitarios sobre cómo se desarrolla este proceso, analizando posibles diferencias en la forma de evaluar entre las cinco grandes áreas de conocimiento de la universidad de santiago de compostela (ciencias sociales y jurídicas, Humanidades, ciencias Experimentales, Enseñanzas técnicas y ciencias de la salud) y, a partir del análisis de toda esta 1 Esta investigación se ha presentado como tesis doctoral con el título: “la evaluación de los estudiantes universitarios: el caso de la universidad de santiago de compostela” dirigida por el profesor doctor Felipe trillo alonso. Evaluación de estudiantes y calidad docente… no se aprecia en los departamentos de la universidad de santiago de compostela. Entre las razones a las que puede ser debida esta situación se encuentra la difícil situación de algunos departamentos universitarios que, para cumplir con los mínimos exigidos por la lru, se configuraron uniendo al profesorado de áreas de conocimiento dispares, con tradiciones diferentes, que hace que sientan que tienen muy pocas cosas en común, y dificulta las posibilidades de reuniones y acuerdos departamentales sobre cuestiones que vayan más allá de los meros trámites administrativos. En opinión de los directores de departamento entrevistados, las diferencias existentes entre las subáreas que conforman los departamentos, así como la necesidad de que los acuerdos docentes surjan del debate y posicionamiento interno del profesorado, es un proceso para el que parece que todavía no se encuentran preparados o suficientemente motivados. 2. El profesorado universitario no cuenta con la formación ni la tradición necesarias para abordar colegiadamente temas relacionados con la docencia, bien sea porque sienten que la docencia universitaria está infravalorada, de forma que a nivel institucional no importa como sea su desarrollo ni se va a valorar de ninguna forma los esfuerzos y el tiempo dedicado a mejorarla, bien sea porque la tradición universitaria hace que se viva como una labor a desarrollar en solitario, donde no se comparten los problemas que pueden surgir ni las soluciones que se van alcanzando para mejorarlos. de hecho, los directores de departamento entrevistados expresan que es difícil iniciar y desarrollar procesos de debate y acción grupal entre el profesorado universitario sobre temas relacionados con la evaluación o la docencia en general, cuando estos modos de actuación no forman parte de las rutinas o hábitos docentes. tal y como nos advierte miguel Ángel santos guerra (1993), los profesores han recibido una formación, han tenido un desarrollo profesional y han realizado un perfeccionamiento casi siempre asentados en el individualismo. El paradigma de colegialidad exige una nueva concepción y una nueva práctica a la que el profesorado no está acostumbrado, y que además requiere de unas condiciones y un reconocimiento que no se dan en el contexto universitario. 3. no se está potenciando el desarrollo de capacidades cognitivas superiores en los estudiantes. autores como carles monereo y josé ignacio pozo (2003), entre otros, consideran que las competencias que deben desarrollar los estudiantes universitarios podrían agruparse en seis grandes bloques: aprender a aprender y a pensar, a cooperar, a comunicarse, a empatizar, a ser crítico y a automotivarse. sin embargo, no parece que estas competencias se estén fomentando ni garantizando con el desarrollo de la evaluación ya que, de acuerdo con las percepciones que nos han expresado estudiantes y directores encuestados, lo que se evalúa fundamentalmente es el grado de asimilación o conocimiento de los contenidos trabajados 9 Mónica Porto Currás en el aula, si bien de ese conocimiento lo que importa fundamentalmente es la solución de los ejercicios o la reproducción de la información, con independencia de que se haga memorísticamente. y puesto que lo que no se evalúa se devalúa, cabe suponer que no existe interés alguno por garantizar que se promocione el desarrollo de capacidades que se suponen básicas en la formación de un estudiante de educación superior. 4. a pesar de que tanto profesores como estudiantes muestran estar descontentos o poco satisfechos con el desarrollo de uno de los aspectos básicos en el desarrollo del proceso de enseñanza-aprendizaje, no parece que se estén realizando grandes esfuerzos para modificar esta situación, dando la impresión de que ambos colectivos tienen asumido que es demasiado difícil –cuando no imposible– modificar esta realidad. 5. los estudiantes universitarios avanzan en sus estudios superiores conformando o consolidando la idea de que es más importante aprobar unos exámenes que el proceso de aprendizaje que están desarrollando, de forma que no dudan en condicionar la forma de estudiar al tipo de pruebas de evaluación que tendrán que superar, o intentar averiguar qué es lo que el profesor va a considerar como respuesta correcta aunque ellos no estén de acuerdo en que lo sea. de esta forma se está consiguiendo formar a profesionales de nivel superior en capacidades que tienen poco que ver con la defensa de sus ideas, principios o valores, el pensamiento crítico, la reflexión, la creatividad, etcétera. 6. se está muy lejos de conseguir el entorno de aprendizaje que se pretende en el Espacio Europeo de Educación superior, ya que uno de sus principios básicos es fijar como eje de referencia de todo el proceso el propio aprendizaje de los alumnos, y precisamente ese proceso de aprendizaje es un gran desconocido para los docentes universitarios. En palabras de domingo docampo (2001), esta cultura del aprendizaje debería llevarnos a una revisión profunda de los esquemas de evaluación, con el fin de reflejar adecuadamente en las calificaciones el esfuerzo efectuado por los estudiantes. Es decir, que en esas calificaciones se refleje realmente cuál ha sido el proceso de aprendizaje seguido por el alumno, las condiciones en las que ha trabajado y las capacidades que ha desarrollado; aspectos que hemos comprobado no están presentes en el actual modo de desarrollar la evaluación de estudiantes. 7. muchos de los problemas que se detectan en el proceso de evaluación: falta de medios materiales y humanos, deficiente formación pedagógica del profesorado, elevado número de alumnos, falta de coordinación, excesiva compartimentalización del conocimiento, escaso reconocimiento a la labor docente, o rutinización de las prácticas profesionales, van a condicionar igualmente todo el proceso de enseñanza que se realiza en el contexto universitario, dificultando enormemente que sea un proceso de calidad. por consiguiente, el saber cómo se está realizando este proceso ofrece información muy relevante sobre la calidad de la docencia de esta institución, lo que lo valida como un indicador deseable o necesario. 10 Evaluación de estudiantes y calidad docente… 2. ¿EstÁ contriBuyEndo la Evaluación dE EstudiantEs a la mEjora dE la calidad docEntE dE la usc? uno de los objetivos prioritarios de esta investigación era establecer cómo contribuye la forma de realizar el proceso de evaluación a la mejora de la calidad docente de la universidad de santiago de compostela, y la información ofrecida por estudiantes y directores de departamento encuestados no nos permite dar una respuesta muy halagüeña. Hablar de calidad de la docencia universitaria exige conjugar dos perspectivas: una intrínseca, que hace referencia al acatamiento o respeto a las exigencias didácticas de una ciencia o de una disciplina; y otra extrínseca que se refiere a la correlación con las necesidades del entorno o de la institución en la que se realiza. consecuentemente, para que el proceso de evaluación de estudiantes esté contribuyendo a la calidad de la docencia, debe hacerlo desde ambas perspectivas. pues bien, desde una perspectiva extrínseca no se puede decir que la evaluación de estudiantes esté contribuyendo realmente a la calidad de la docencia de la usc, puesto que, tal y como se realiza, no sólo no favorece el desarrollo de las funciones de la universidad, sino que en gran medida contradice lo que teóricamente cabe esperar de esta institución. así, no podemos decir que la consolidación y creación de valores culturales, el desarrollo de un conocimiento crítico y holístico en los estudiantes, la consecución de una formación global de estudiantes y profesores (funciones que se le atribuyen a las instituciones de educación superior) sean aspectos que la evaluación de estudiantes esté fomentando. muy al contrario, parece que el reducir todo el proceso de evaluación a un examen final, donde generalmente se pide a los estudiantes que reproduzcan la información dada o lleguen a una solución establecida sin cuestionarse el por qué ni cómo se llega a ese resultado, lo que está promoviendo es una visión dogmática y absolutista del conocimiento, que además se da de forma independiente e inconexa entre materias, y sin preocuparse en absoluto en los valores que deberían ir asociados a ese campo de conocimiento. la práctica de la evaluación de estudiantes lo que pone de manifiesto es que, en lugar de hacer ciencia, la universidad divulga sus resultados, transmitiendo una información de la que luego se exige su fiel reproducción en el momento oportuno. además, hay que considerar que las dos funciones principales de la evaluación de estudiantes permiten ayudar a la mejora del proceso de enseñanza-aprendizaje: para adaptarse mejor al proceso de aprendizaje de los estudiantes y, al mismo tiempo, comprobar cuáles son los conocimientos que han adquirido, y acreditar si están preparados para desempeñar determinada actividad profesional. sin embargo, la evaluación de estudiantes que se realiza en la universidad de santiago de compostela no está cumpliendo ambas funciones o, por lo menos, no de forma generalizada. lo que se ha constatado es que en la mayor parte de los casos la evaluación de estudiantes se realiza esencialmente con una finalidad acreditativa, para certificar la consecución de una serie de conocimientos por los alumnos, pero casi nunca adopta 11 Mónica Porto Currás funciones que puedan servir para mejorar el proceso de enseñanza-aprendizaje ni ningún tipo de finalidad formativa para estudiantes ni profesores. obviamente, si no se cumplen las funciones que teóricamente tiene asignada la evaluación, tampoco se está apoyando con ella el desarrollo de las funciones de la institución universitaria, ya que ambas son esenciales para este fin. pero es que, del mismo modo tampoco se puede decir que la evaluación de estudiantes que se está desarrollando en esta universidad apoya la calidad docente de la usc desde una perspectiva intrínseca, ya que no cumple ninguno de los posibles macrodescriptores de calidad para la evaluación (Fernández pérez, 1991). así, hemos constatado que: – tal y como se plantea la evaluación de estudiantes, no sirve para aprender; – aunque se utilizan criterios claros de evaluación, estos no son justificados ante los alumnos; – no se realiza una evaluación de proceso; – únicamente se evalúa al alumno, reduciéndolo a los resultados obtenidos en un examen final; – no se explican las razones de las calificaciones; – no se utiliza la evaluación de estudiantes para innovar y mejorar el proceso de enseñanza-aprendizaje; – la evaluación la decide el profesor solo, sin consultarla ni debatirla con nadie, y realizándola en la mayoría de los casos mediante una única prueba; – y no se puede saber hasta qué punto se consigue alumnos convencidos, no vencidos. En síntesis, con los rasgos identificativos de la evaluación de estudiantes, obtenidos a partir de la triangulación de las respuestas de estudiantes y directores de departamento, podemos concluir que la evaluación de estudiantes en la universidad de santiago de compostela no está contribuyendo a la calidad de la docencia de esta institución, dando lugar a un perfil de evaluación que podría caracterizarse por los siguientes aspectos: 1. la evaluación de estudiantes se concibe mayoritariamente como una comprobación de los conocimientos trabajados. 2. con gran frecuencia se reduce la evaluación a los resultados conseguidos por los alumnos, resultados que en muchos casos se restringen al nivel de capacidades cognitivas básicas. 3. El referente fundamental que se utiliza en la usc para la evaluación de estudiantes es el normotipo criterial independiente. de esta forma, aunque no se contextualizan esos criterios en función del grupo de alumnos o de las circunstancias específicas del estudiante que se está evaluando, parece que los profesores tienen claro cual es el marco de referencia que deben emplear para evaluar a sus alumnos en cada una de las materias, y lo utilizan sistemáticamente. por el contrario, la evolución o progreso que sigue cada alumno en el período que se evalúa (normotipo individualizado) prácticamente nunca se utiliza como referente de la evaluación. 4. El instrumento de evaluación por antonomasia en esta universidad es el examen. 5. la evaluación se convierte en un momento final del proceso de enseñanza12 Evaluación de estudiantes y calidad docente… 13 aprendizaje, pero que se realiza de forma independiente y aislada del mismo. 6. prácticamente nunca la evaluación de estudiantes que se desarrolla en la usc adopta funciones que puedan servir para mejorar el proceso de enseñanza-aprendizaje ni ningún tipo de finalidad formativa para estudiantes ni profesores. 7. El proceso de evaluación de estudiantes es un proceso que los profesores organizan y deciden en solitario. 8. la evaluación se realiza fundamentalmente para el sistema, para certificar los resultados de los alumnos. 9. para los estudiantes de nuestra universidad es más importante la certificación de haber adquirido unos “conocimientos” que el proceso de aprendizaje o los propios conocimientos en sí. 10. Hay una tendencia general en la forma de desarrollar la evaluación de estudiantes en toda la universidad, con pocas diferencias por áreas de conocimiento. El planteamiento curricular de las diferentes áreas de conocimiento no establece diferencias a la hora de llevar a cabo la evaluación. consecuentemente, y a pesar de contar cada área con una racionalidad epistemológica interna, la peculiaridad del área no queda reconocida en la práctica de la evaluación. 11. la evaluación de estudiantes no está propiciando una educación integral, de acuerdo con una docencia rigurosa y armoniosa en contenidos y valores educativos y pedagógicos. 12. la evaluación no sólo no contribuye al desarrollo de las funciones de la universidad, sino que en gran medida contradice lo que teóricamente cabe esperar de esta institución. si lo deseable sería que se estuviera fomentando la creación y consolidación de valores culturales, el desarrollo de un conocimiento crítico y la consecución de una formación global de estudiantes y profesores, lo que se constata es que se está reforzando una concepción dogmática, estática de la ciencia, donde el saber se utiliza como algo definitivo, acabado, perfecto, que es necesario transmitir a las siguientes generaciones. 13. con la actual forma de llevar a cabo la evaluación de estudiantes no se está avanzando hacia el Espacio Europeo de Educación superior. no se están modificando los esquemas de evaluación para valorar y reflejar en las calificaciones el esfuerzo efectuado, el proceso de aprendizaje seguido, las condiciones en que han trabajado y las capacidades desarrolladas. 14. no se está promoviendo, ni garantizando, con la evaluación de estudiantes una visión holística de lo que supone un campo de conocimiento, una titulación o una profesión específica. 15. no se están primando las capacidades cognitivas de nivel superior, fundamentales para que la universidad tenga capacidad de iniciativa y cree pautas de pensamiento y de desarrollo científico y técnico que influyan en la sociedad. 16. El cumplimiento de la normativa que regula la evaluación de estudiantes se centra en sus aspectos más “técnicos”: fechas, plazos y formas, no en lo que podría suponer una visión más amplia del proceso de evaluación y un trabajo colegiado para su consecución. Mónica Porto Currás 17. no se está avanzando en la dirección de ninguno de los cambios necesarios para contar con un modelo de evaluación contextualizado en el ámbito universitario. 3. ¿QuÉ HacEr para mEjorar? por último, en esta investigación nos planteamos si con esta información es posible realizar propuestas de mejora o formular algunas de las posibles líneas de actuación a seguir para mejorar la actual forma de desarrollar el proceso de evaluación de estudiantes y, con él, la calidad de la docencia de esta universidad. así, se establece que, frente a esta realidad, la alternativa positiva hacia la que debería tender la evaluación de estudiantes, entendiéndola como propuesta de máximos, sería la siguiente: 1. la evaluación de estudiantes debe ser coherente con lo que se establece en el Espacio Europeo de Educación superior, de forma que el eje sobre el que gira todo el proceso debe ser el aprendizaje de los estudiantes, y en las calificaciones se debe reflejar el esfuerzo efectuado, el proceso de aprendizaje seguido, las condiciones en que han trabajado y las capacidades desarrolladas. 2. la evaluación debe contribuir al desarrollo de las funciones de la universidad, fomentando la creación y consolidación de valores culturales, el desarrollo de un conocimiento crítico y la consecución de una formación global de estudiantes y profesores. 3. para ello, la evaluación de estudiantes debe priorizar especialmente las capacidades cognitivas de nivel superior, transferibles –no específicas–, fundamentales para que la universidad tenga capacidad de iniciativa y cree pautas de pensamiento y de desarrollo científico y técnico que influyan en la sociedad. 4. la evaluación de estudiantes debe promover y garantizar una visión holística de lo que supone un campo de conocimiento, una titulación o una profesión. 5. debe haber una tendencia general en la forma de desarrollar la evaluación de estudiantes en toda la universidad, no obstante, el planteamiento curricular de las diferentes áreas de conocimiento debe establecer diferencias a la hora de llevar a cabo la evaluación de estudiantes. consecuentemente, la peculiaridad del área debe quedar reconocida tanto en el desarrollo de la docencia en general, como en la práctica de la evaluación en particular. 6. El proceso de evaluación de estudiantes debe ser un proceso que los profesores organizan y deciden colegiadamente con el resto de profesores del departamento, contextualizándolo en cada materia concreta y discutiéndolo con el grupo de alumnos. 7. la evaluación debe entenderse como una valoración y guía del proceso de enseñanza-aprendizaje, sirviendo para orientar este proceso al mismo tiempo que proporciona información en todo momento sobre el nivel de comprensión de los conocimientos trabajados y el grado de adquisición de las competencias pretendidas. 8. la evaluación de estudiantes debe incluir tanto el proceso de adquisición de 14 Evaluación de estudiantes y calidad docente… esas competencias como la información relativa a las condiciones en que trabajan profesores y alumnos, el esfuerzo que están realizando, los valores y actitudes que se desarrollan, las tareas y estrategias de enseñanza y de evaluación utilizadas, etcétera. 9. la evaluación de estudiantes debe utilizar como referente fundamental el normotipo criterial, contextualizando esos criterios en función del grupo de alumnos o de las circunstancias específicas del estudiante que se está evaluando. además, estos criterios deben ser explicados, justificados y negociados con los estudiantes, que deben asumir la conveniencia y relevancia de los mismos. 10. para recoger información, la evaluación de estudiantes debe utilizar tanto las propias tareas empleadas en el proceso de enseñanza-aprendizaje como estrategias de evaluación (mapas conceptuales, portafolios, evaluación entre iguales, etcétera) que pongan en juego habilidades complejas y procesos metacognitivos. En cualquier caso debe buscar que sean tareas evaluativas auténticas, que permitan trabajar en contextos realistas o valorar investigaciones individuales, y permitan tomar elecciones a los estudiantes sobre la naturaleza de las tareas o los modos de llevarlas a cabo, potenciando el trabajo cooperativo más que el individualista. 11. la evaluación debe estar totalmente integrada en el proceso de enseñanzaaprendizaje, sin ser un momento diferenciado dentro del mismo. 12. las modalidades y exigencias de la evaluación se deben graduar a lo largo del itinerario formativo. 13. El proceso de evaluación de estudiantes debe ser un proceso que los profesores organizan y deciden colegiadamente con el resto de profesores del departamento, contextualizándolo en cada materia concreta y discutiéndolo con el grupo de alumnos. 14. la evaluación de estudiantes debe plasmarse en una normativa que recoja una visión amplia del proceso de evaluación; en la que además de la necesidad de un trabajo colegiado para su consecución se regulen las condiciones para que pueda desarrollarse adecuadamente. se plantea así hacia donde deberían ir los esfuerzos para mejorar la forma de desarrollar la evaluación de estudiantes, y se recoge cuál es la realidad de la que se parte y las condiciones en que se desarrolla. pues bien, teniendo toda esta información en cuenta, esta investigación finaliza estableciendo algunas de las posibles líneas de actuación que favorecerían que tanto la evaluación de estudiantes como el proceso de enseñanza-aprendizaje en general, aumentaran su calidad: 1. revisar y modificar la normativa sobre evaluación de estudiantes: es necesario que esta normativa regule el desarrollo de una evaluación con fines pedagógicos y sociales, donde se establezcan claramente las condiciones en las que tiene que desarrollarse este proceso y se exija el cumplimiento de un perfil de evaluación similar al que acabamos de exponer. 2. promover y requerir un mayor nivel de formación docente, para lo será necesario: a) que sea obligatoria; b) generar su necesidad en el profesorado, es decir, que se motive a 15