Resumen
Los p o undos cambios que se han p oducido en las úl imas dos décadas en las uni e sida-
des eu opeas han acili ado que se pase del pa adigma de can idad al de calidad. Es deci ,
hace unos años el obje i o p io i a io consis ió en posibili a un mayo acceso de es udian-
es a la uni e sidad; en la ac ualidad, y una ez alcanzado es e p ime obje i o, lo que se
pe sigue es mejo a los se icios que la uni e sidad p es a a la sociedad. Una de las he a-
mien as pa a consegui es e cambio, y con ello ans o ma la cul u a uni e si a ia, ha sido
la ins i ucionalización de la e aluación, en endida como una he amien a pa a la mejo a
con inua. En España, no es has a 1995 cuando se ap ueba el Plan Nacional de E aluación
de la Calidad Uni e si a ia, que ha concluido ecien emen e. T anscu idos unos años desde
su ap obación, se ha ealizado un p o undo análisis del mismo, más conc e amen e, se ha
me ae aluado el Plan pa a conoce cuáles han sido sus log os y desacie os y p opone solu-
ciones.
Palab as cla e: eo ía undamen ada, e aluación, uni e sidad, e aluación induc i a.
Abs ac . E alua ion o he Na ional Plan o Uni e si y E alua ion and Quali y
The deep changes ha ha e aken place in he Eu opeans Uni e si ies in he las wo deca-
des, ha e p o oked a change o he pa adigm o quan i y o he one o quali y. I means, ha
many yea s ago he p io i a y aim consis ed in making he access o he s uden s o Uni e si y
as big as possible. Once eached his aim, nowadays, he se ices edde ed o socie y by
he Uni e si y a e pu sued. One o he ools o achie e his change and ans o m he uni-
e si y cul u e, has been he ins i ucionaliza ion o he e alua ion, which mus be unde s-
ood as a ool o a con inuous imp o emen . In Spain, his has no happened un il 1995,
yea in which a Gene al Plan o he E alua ion o he Uni e si y Quali y was app o ed. This
plan has been ecen ly concluded. A e a ew yea s since i s passing, a deep analysis o
his plan has been made. To be p ecise, he plan has been me ae elua ed o know which ha e
been i s successes and mis akes, and p opose di e en solu ions o hem.
Key wo ds: g ounded heo y, e alua ion, uni e si y, induc i e e alua ion.
Pape s 70, 2003 83-113
La e aluación del Plan Nacional de E aluación
y Calidad Uni e si a ia desde la G ounded Theo y
An onio T inidad Requena
Luis Ayuso Sánchez
Diego Gallego Ma ínez
José M. Ga cía Mo eno
Uni e sidad de G anada. Depa amen o de Sociología
a inida@ug .es
Suma io
1. In oducción
2. Ap oximación al obje o de e aluación
3. Modelo de e aluación
4. Resul ados
5. Conclusiones
Bibliog a ía
Pape s 70 001-166 3/9/04 13:11 Página 83
Si comienza uno con ce ezas, e mina á con dudas; mas si se con-
o ma en comenza con dudas, llega á a e mina con ce ezas.
F ancis BACON
1. In oducción
La e aluación de la calidad uni e si a ia ha exis ido desde siemp e1; sin emba -
go, es en la década de los ochen a cuando las sociedades mode nas eu opeas
ue on poco a poco desa ollando p ocesos de con ol y e aluación, con el in
de mejo a la calidad de sus cen os uni e si a ios2. La búsqueda de la calidad
y la excelencia uni e si a ia se engloban, desde mediados de los se en a, en un
nue o con ex o social, cul u al y económico, ca ac e izado po di e sos ac o-
es. Al mismo iempo, se democ a iza la oma de decisiones y se pe sonaliza
la o ganización, es deci , se pe sigue una mayo au onomía de las ins i ucio-
nes que in eg an la enseñanza supe io .
Po o o lado, la uni e sidad consigue ab i se a odas las clases sociales,
pasando de una enseñanza selec i a o eli is a a o a más democ a izada, aunque
masi icada3. Po úl imo, des aca un nue o ma co uni e si a io cada ez más
abie o, o lo que es lo mismo, coexis en en el mismo con ex o uni e sidades
an o públicas como p i adas (De Miguel y o os, 2001). El modelo mode no
de la enseñanza supe io —a pa i de la década de los ochen a— su gió pa a
sa is ace las demandas p oducidas po el inc emen o de la na alidad de los
años sesen a, con igu ándose una uni e sidad de masas (G ao y Win e , 1999).
Ac ualmen e la si uación ha cambiado, aho a exis e una nue a ealidad ca ac-
e izada po el descenso del núme o de ma iculados y po un mayo núme o
de uni e sidades. Es e nue o ma co posibili a que las ins i uciones de ense-
ñanza supe io engan que compe i po man ene el núme o de alumnos, po
consegui más inanciación y po aumen a el p es igio, lo que epe cu e en la
búsqueda de la calidad.
En esumen, conseguidos los obje i os de la década de los se en a pa a la
uni e sidad como la democ a ización del sis ema, la uni e salidad, la au ono-
mía, la mode nización y la p o undización en las ac i idades cien í icas, se plan ean
o os nue os. Aho a, y as consegui los es ánda es de can idad, es el momen o
84 Pape s 70, 2003 A. T inidad; L. Ayuso; D. Gallego; J.M. Ga cía
1. Guy Nea e (2001) c ee que la calidad ha sido la cla e de los asun os uni e si a ios eu o-
peos. Lo que ha cambiado pa a es e au o ha sido el p oceso de ce i icación, los p ocesos
de e aluación y qué se e alúa. Po o o lado, a i ma que la e aluación puede ene dos sali-
das en un u u o. En p ime luga , se puede e o za como mo o de la plani icación es a-
égica de la p opia uni e sidad y, en segundo luga , y és e es el miedo de muchas uni e si-
dades, puede se i pa a ala ga la cadena de con ol y pe mi i al gobie no usa la como
«mando a dis ancia» (p. 174).
2. Guy Nea e (2001) es ablece que la e aluación se ha dado de dos o mas en el con inen e eu o-
peo: como e i icación o con ol y como he amien a explo a o ia pa a cons ui el u u o
de las uni e sidades.
3. Véase De Miguel (1973), B icall (ed.) (2000), Molina (2001), Pé ez Díaz y Rod íguez
(2001).
Pape s 70 001-166 3/9/04 13:11 Página 84
de habla de calidad, es deci , se a a de consegui una mayo ope a i idad, e ec-
i idad y esponsabilidad social. Pa a log a es as nue as me as, y debido a las
peculia idades del sis ema uni e si a io, la e aluación se p esen a como un camino
iable, pues o ece la posibilidad de pa icipa a odos los ac o es sociales.
Los nue os obje i os que planean sob e la uni e sidad, como la mo ilidad,
la coope ación en e ins i uciones, la disposición de in o mación pa a clien-
es y ge en es, pueden se a endidas po las di e sas inicia i as de e aluación,
pe o ¿qué es lo que ealmen e se p e ende con la e aluación?: 1) conoce la
ealidad de las ins i uciones uni e si a ias; 2) p opo ciona a los usua ios ac ua-
les y u u os del se icio educa i o in o mación su icien e del cen o, y 3) ela-
bo a , a pa i de los esul ados de las e aluaciones, planes de mejo a o de cali-
dad de acue do con los ecu sos de que dispone cada unidad. Es os es obje i os
p e enden consegui cambios p o undos en la o ma de ges iona la uni e si-
dad o, más conc e amen e, si la e aluación llega a in eg a se den o de la ges-
ión y polí ica uni e si a ias, se pod á deci que ha habido un cambio de cul u a
en las uni e sidades españolas4—e aluación in eg ada—, pues se pasa á de
un modelo basado en la escasa in o mación y en las decisiones opacas a o o
que u iliza la in o mación como mo o de ges ión y anspa encia, p incipios
desa ollados en la Ley de Re o ma Uni e si a ia (LRU) y en la Ley O gánica
de Uni e sidades (LOU).
Todo es o ha hecho que la e aluación ins i ucional adquie a en los úl imos
años una g an ele ancia y p esencia en las adminis aciones públicas españo-
las, ya que es imula la di e sidad, mejo a el uncionamien o de las ins i ucio-
nes, ayuda a la c eación de nue as ideas y soluciones, y omen a la compe en-
cia po los ecu sos ma e iales y humanos5. En la uni e sidad, la he amien a
usada pa a e alua ha sido el Plan Nacional de E aluación y Calidad de las
Uni e sidades (PNECU), el cual se á analizado a lo la go de es as líneas de un
modo pa icula .
El p incipio que ha inspi ado la ealización de es e abajo, cuyas conclu-
siones p incipales se p esen an a con inuación, consis en en un es udio sob e
la ealidad de la e aluación ins i ucional uni e si a ia en España a pa i de
una me ae aluación del p ime plan, cen ándonos sob e odo en la pues a en
ma cha y los e ec os del PNECU. Cuando se habla de me ae aluación, se alude
al análisis po meno izado de las e aluaciones lle adas a cabo con el obje i o
de ealiza o a e aluación. San os Gue a (1990) de ine la me ae aluación
como el p oceso de análisis que consis e en hace un juicio de alo sob e la
misma e aluación, es deci , e alua la p opia e aluación.
Se a a de cons ui un discu so cohe en e sob e cómo se ha desa ollado
el PNECU, cuáles han sido sus p oblemas, cuáles sus i udes, qué p ocesos
La e aluación del Plan Nacional de E aluación y Calidad Uni e si a ia Pape s 70, 2003 85
4. Ginés Mo a (2000, p. 214) de ine la cul u a uni e si a ia como el «conjun o de c eencias
de los miemb os de la comunidad uni e si a ia que se ha ido desa ollando en un p oceso
his ó ico que se ha ansmi ido an o po el lenguaje como po los símbolos. Es o eje ce
in luencia en el compo amien o y la ges ión».
5. Véase Al i a (1991), San os Gue a (1990), De Miguel (1991) y T inidad (1995 y 2002).
Pape s 70 001-166 3/9/04 13:11 Página 85
de cambio ha gene ado y qué se puede hace pa a mejo a lo. En de ini i a, no
se a a de hace un es udio que o ezca unas pinceladas sob e es a ealidad,
sino cons ui una eo ía que si a pa a explica el p oceso de e aluación segui-
do en la uni e sidad española.
Tal p e ensión implica selecciona y de ini odos aquellos elemen os que
in e ienen en el p oceso de e aluación, pa a lo cual se ha op ado po elabo a
un modelo de e aluación basado en la Teo ía Fundamen a de Glase y S auss,
en endida como «una me odología pa a el desa ollo eó ico, pa iendo de la
ecogida y análisis sis emá ico de da os» (Glase , 1992: 16). Más conc e a-
men e, el igo de la inducción analí ica nos pe mi e hace el juicio de alo
necesa io en cualquie ipo de e aluación, gene ado a a és del alo ep e-
sen a i o de la in o mación según el ni el de abs acción y especi icación con-
cep ual a una eo ía (Ca e o, 1999).
En esumen, median e es e a ículo se es ablece una eo ía o mal que expli-
ca cómo se ha desa ollado el PNECU y se es ablece un cuad o de hipó esis
eó icas que p e enden econoce los mecanismos causales que de inen el p o-
ceso de e aluación en las uni e sidades españolas. No se a a sólo de conoce
los acie os y los e o es, sino de i más allá, de p esen a cual es la a iable a pa -
i de la cual se puede explica odo el conjun o.
2. Ap oximación al obje o de e aluación
La e aluación de las ins i uciones educa i as iene adición en Eu opa, des-
acando países como G an B e aña (In o me Repo , 1990) y Holanda (Dochy
y o os, 1990). Recogiendo es a ayec o ia e alua i a se desa olló el modelo
eu opeo de e aluación, que enía como obje i o p incipal busca pun os comu-
nes en los p ocesos de e aluación pa a las di e sas uni e sidades del con i-
nen e6. Es e modelo p esen a una se ie de ac o es imp escindibles pa a el aná-
lisis de las ins i uciones uni e si a ias, donde des aca la independencia o
au onomía de los p ocedimien os, la au oe aluación, la e aluación ex e na y
la publicación de in o mes7.
En España es a p incipios de los no en a cuando los abajos de e aluación
su en un impulso. Es as in es igaciones se pueden di idi en es g andes sec-
o es8: 1) e aluación del p o eso ado; 2) e aluación del alumnado, y 3) e a-
luación de la o ganización y uncionamien o de las ins i uciones uni e si a-
ias.
86 Pape s 70, 2003 A. T inidad; L. Ayuso; D. Gallego; J.M. Ga cía
6. En e sus obje i os más impo an es encon amos la necesidad de in ensi ica el conocimien o
de la necesidad de la e aluación de la calidad en la enseñanza supe io , en iquece una dimen-
sión eu opea a la e aluación de la calidad y con ibui a mejo a el econocimien o ac ual de
los diplomas y pe iodos de es udios, p omo iendo la coope ación en e las ins i uciones y
mejo ando la comp ensión mu ua de los p og amas enseñados en los dis in os países.
7. Véase P oyec o Pilo o Eu opeo pa a la E aluación de la Calidad en la Enseñanza Supe io ,
1994.
8. TRINIDAD,A.; GARCÍA,I. (2002). Análisis de la bibliog a ía sob e e aluación de uni e sida-
des (1990-2002). Documen o de abajo pendien e de publicación.
Pape s 70 001-166 3/9/04 13:11 Página 86
Los e e idos a la e aluación del p o eso ado uni e si a io hacen hincapié
en ealiza una p opues a de e aluación que pueda se aplicable a odo el p o-
eso ado, p oponiendo un amplio conjun o de indicado es pa a medi la cali-
dad docen e. Des acan las apo aciones ealizadas po el p o eso Apodaca y
su g upo de in es igación en el País Vasco (1990), la de Tejedo y Mon e o
(1990), la de De Miguel (1991) y la de E xega ay y Sanz (1991).
Po lo que espec a a los es udios cen ados en el alumnado, las p opues as
de e aluación iban encaminadas a medi la calidad en el ap endizaje y cómo
és a quedaba e lejada en el endimien o académico. La ac i ud de los es u-
dian es, e e ida a la in luencia que és a eje ce sob e su compo amien o, ue am-
bién un aspec o ecu en e en muchos de es os abajos. Como ejemplos
des acamos las publicaciones del g upo coo dinado po Ja ie Tejedo (1996,
1998). Des aca ambién He nández Pina (1996) po su de ensa del en oque
cuali a i o en la e aluación como mé odo pa a conoce mejo las e lexiones de
es e colec i o uni e si a io.
El e ce ipo de es udios p esen a expe iencias e alua i as e e idas a la
o ganización y al uncionamien o de cen os uni e si a ios. El alcance de es as
expe iencias a ec aba desde los aspec os pu amen e o ganiza i os has a los apo-
yos a la docencia, pasando po el clima o ganiza i o de las acul ades y depa -
amen os. Además, los abajos se cen a on en los planes y p og amas de es u-
dio, en los cen os, en el uncionamien o de las biblio ecas o en la e aluación
de las p ác icas de una de e minada asigna u a. En es e sen ido, es udios pio-
ne os ue on los ealizados po Jiménez González (1990), Ma ín Ibáñez (1991)
y Pé ez Jus e (1991). Po o o lado, T inidad (1995, 2001) aplicó un en oque
holís ico donde in e enían odos los ac o es de la ins i ución uni e si a ia y
Alonso Escon ela y Ál a ez Li es (1998) cen a on su abajo en la e aluación
de los planes de es udio, línea de in es igación bas an e uc í e a en cuan o a
p oducción cien í ica9. O os abajos ele an es incluidos en es e apa ado
son los e e idos a la e aluación del uncionamien o y o ganización de las
biblio ecas uni e si a ias (Poll y o os, 1998; Cas illo Blanco, Ma ínez de
Pablos y Se e , 1999).
Jun o a es as expe iencias e alua i as pa ciales, o o conjun o de aba-
jos de ca ác e gene al end á impulsado po el Consejo de Uni e sidades,
quien ha enido un papel cla e en la e aluación ins i ucional en España.
Realizó es udios pa a in oduci y a ianza la cul u a de e aluación en las
ins i uciones uni e si a ias. Es os es ue zos se conc e a on en el P og ama
Expe imen al de E aluación de la Calidad en la Uni e sidad, en e 1992 y
1994, y cuyos esul ados ue on muy bien alo ados po la comunidad uni-
e si a ia. A pa i de es a expe iencia, el omen o de la calidad uni e si a-
ia end á con inuidad en nues o país con la elabo ación del PNECU en
1995 ( e cuad o 1).
La e aluación del Plan Nacional de E aluación y Calidad Uni e si a ia Pape s 70, 2003 87
9. Es udios e e idos a la e aluación de planes de es udios pueden e se en Oso o Sie a (1994)
y Calle Pu ón y o os (1996).
Pape s 70 001-166 3/9/04 13:11 Página 87

Los obje i os con los que apa eció el PNECU ue on: po un lado, acio-
naliza la in e sión que el Es ado ealizaba en la educación supe io , p omo-
iendo una e aluación ins i ucional en odas las uni e sidades, pa a así pode
ga an iza una mayo e icacia y e iciencia en la u ilización de los ecu sos. Po
o o lado, se p e endía equipa a la uni e sidad española con cánones, me o-
dologías y p og amas o ma i os, análogos a los que se es aban desa ollando
a escala in e nacional. Y, inalmen e, ambién se buscaba da una in o mación
lo más obje i a posible sob e la si uación eal en la que se encon aba la edu-
cación supe io , pa a, a pa i de es o, pode oma decisiones más ap opiadas
y encaminadas a da o mación educa i a más adecuada, con las que espon-
de mejo a las necesidades que la sociedad demandaba.
88 Pape s 70, 2003 A. T inidad; L. Ayuso; D. Gallego; J.M. Ga cía
Cuad o 1. E apas de la e aluación ins i ucional.
Años Obje i os
1978-1985 Cons i ución española.
Ley de Re o ma Uni e si a ia (LRU).
C eación del Consejo de Uni e sidades.
1986-1989 Es udios p e ios o ien ados a de ini unos es ánda es de calidad.
1990-1991 Deba e sob e el alcance de la e aluación (es udios, semina ios,
publicaciones) o ien ados a mejo a la calidad.
1992-1993 P og ama Expe imen al de E aluación.
1994-1995 P oyec o Eu opeo de E aluación de la Enseñanza Supe io .
P og ama de E aluación Ins i ucional de la CRE.
Plan Nacional de E aluación.
Valo ación del P og ama Expe imen al.
Acue do del Consejo de Uni e sidades po el que se p opone un plan
de e aluación.
1996-1997 P ime a Con oca o ia del Plan Nacional.
P ime a Con oca o ia de Uni e sidades Au ónomas.
P ime In o me de E aluación.
P opues a de la Segunda Con oca o ia.
1998 Segunda Con oca o ia del Plan Nacional.
1999 Te ce a Con oca o ia del Plan Nacional.
2000 Cua a Con oca o ia del Plan Nacional.
In o me Anual de la Segunda Con oca o ia.
2001 II Plan de la Calidad de las Uni e sidades.
2001 Ley O gánica de Uni e sidades (LOU).
2002 C eación de la Agencia Nacional de E aluación de la Calidad y
Ac edi ación (ANECA).
2003 Se pone en uncionamien o la ANECA.
2003 In o me Global del PNECU.
Fuen e: Adap ación de De Luxán (1997) y elabo ación p opia.
Pape s 70 001-166 3/9/04 13:11 Página 88
El pun o undamen al del plan lo cons i uye la búsqueda de la calidad. En
es e sen ido, el PNECU une las dos pe spec i as adicionales de la calidad:
in ínseca (absolu a) y ex ínseca ( ela i a). La p ime a hace e e encia al aca-
amien o o espe o a las exigencias epis emológicas de una ciencia, de una dis-
ciplina. La segunda se e ie e a la pe inencia, es deci , a la co elación con las
necesidades del en o no.
Es e modelo de e aluación de i ulaciones comp ende el es udio de los es
g andes bloques que a ec an a la uni e sidad: enseñanza, in es igación y ges-
ión. Consis e en la aplicación de un p oceso de e aluación que pa e de la
e lexión en la p opia comunidad uni e si a ia (au oe aluación y au oin o -
me), incluye la isi a de expe os en e aluación de o as uni e sidades (in o me
ex e no) y odo ello concluye con la edacción de un in o me inal (de i ula-
ción e aluada y de uni e sidad e aluada), en el que se incluyen los pun os
ue es y pun os débiles encon ados a pa i de la e aluación, así como las
p opues as de mejo a pa a la alcanza la calidad ( igu a 1).
El PNECU se ha desa ollado a lo la go de cua o con oca o ias (1996,
1998, 1999 y 2000), omando como e e encia el modelo de e aluación desc i o,
con dis in o seguimien o y esul ados po pa e de las unidades e alua i as, es
deci , las uni e sidades. T as el es udio de los in o mes globales emi idos po el
Consejo de Uni e sidades, se ha de ec ado una se ie de p oblemas asociados
al p oceso de e aluación, p oblemas que ponen en duda la aplicabilidad, e ec-
i idad y con inuidad del modelo e alua i o y de su iloso ía al y como se ha
aplicado has a la echa. Po ello, nues o obje o de es udio ha sido es e I Plan
Nacional desa ollado en e los años 1996-2000, a in de descub i cuáles e an
los p incipios eó icos que o ien aban la acción a pa i del PNECU y cómo se
ha implan ado és e ealmen e.
3. Modelo de e aluación
Al inicia cualquie p oceso de e aluación, se debe esponde a es p egun-
as básicas: qué e alua , cómo e alua y quién e alúa. Nues o obje o de
es udio es e alua el PNECU —qué e alua —. Pa a consegui es e obje i o,
se ha op ado po un en oque cuali a i o, ya que és e no p e ende explica
es uc u as, sino conoce la acción, es deci , cómo se ha desa ollado el p o-
ceso de e aluación desde la pe spec i a de los esponsables de la e aluación
de la enseñanza uni e si a ia —quién e alúa— o, más conc e amen e, «[…]
se u iliza una me odología cuali a i a que pe mi e cap a el o igen, el p oceso
y la na u aleza de es os signi icados que b o an de la in e acción simbólica
en e los indi iduos»10. De es a in e acción simbólica o in e p e ación que
hacen los indi iduos de la ealidad nace un signi icado compa ido po los
pa icipan es, pe o, ¿qué p ocedimien o hemos seguido pa a cap a esa ea-
lidad?
La e aluación del Plan Nacional de E aluación y Calidad Uni e si a ia Pape s 70, 2003 89
10. Ruiz Olabuénaga (1996, p. 15).
Pape s 70 001-166 3/9/04 13:11 Página 89
90 Pape s 70, 2003 A. T inidad; L. Ayuso; D. Gallego; J.M. Ga cía
Figu a 1. Modelo induc i o de e aluación.
1.º Uni e sidad.
P ocesos
y esul ados
del PNECU
2.º Uni e sidad.
P ocesos
y esul ados
del PNECU
3.º Uni e sidad.
P ocesos
y esul ados
del PNECU
4.º-12.º
Uni e sidad.
P ocesos
y esul ados
del PNECU
13.º-17.º
Uni e sidad.
P ocesos
y esul ados
del PNECU
Todas
las unidades
del mues eo
eó ico. Ma iz
de da os
Responsable
del p oceso
de e aluación
Responsable
del p oceso
de e aluación
Responsable
del p oceso
de e aluación
Responsable
del p oceso
de e aluación
Responsable
del p oceso
de e aluación
Discu so
de odos los
esponsables
En e is as
abie as
En e is as
abie as
En e is as
abie as
En e is as
abie as
En e is as
abie as
Unidad
he menéu ica
Codi icación abie a
de la en e is a,
u ilización de la
iangulación
de suje os
Codi icación axial
Consecución
de la sa u ación
eó ica
Explo ación
de las elaciones
en e ca ego ías
o códigos.
Codi icación
selec i a
Sa u ación
de las ca ego ías
y p oba hipó esis
Recopilación
de concep os y sus
memos eó icos
Códigos
Ca ego ías
Familia
de códigos
Teo ía
sus an i a
Concep os
Teo ía
o mal
Qué
e alua
Quién
e alúa
Cómo
e alua
P oceso
de e aluación:
mé odo compa a i o
cons an e
Elemen os
de la
G ounded
Theo y
Pape s 70 001-166 3/9/04 13:11 Página 90
El en oque cuali a i o se ayuda de di e sas écnicas pa a analiza una ea-
lidad social. Al se nues o obje o de es udio amplio y complejo, u iliza el
análisis induc i o implica que, a medida que a anza la in es igación, ienen
que eme ge nue as ealidades. Po al mo i o se ha op ado po la en e is a
abie a —cómo e alua —, que debe án de conclui a medida que se p oduz-
ca la sa u ación de las ca ego ías11 ( éase igu a 1). El cómo, el qué y quién
e alua iene ma cado po la lógica del mues eo eó ico que pe mi e elabo-
a el modelo a segui . Desde la G ounded Theo y, y aplicando la lógica del
mues eo eó ico, es a a és del con inuo análisis de da os cómo se decide a
quién e alua y qué es lo más ele an e a e alua . Po an o, qué y quién ienen
ma cados po un con inuo i y eni al es udio de campo, buscando alcanza
ni eles de sa u ación eó ica. Todo es o se consigue maximizando la a iabili-
dad de los da os a a és del mé odo compa a i o cons an e (Ca e o, 1999).
En p ime luga , se op a po una e aluación ex e na, es deci , ninguna de
las pe sonas que componen el equipo de in es igación ha pa icipado en los
p ocesos de e aluación in e nos y ex e nos de las uni e sidades seleccionadas.
Es o imp ime mayo obje i idad a la e aluación y pe mi e un ace camien o
desp o is o de la con aminación que el in es igado lle a si ha sido o es agen-
e implicado en el p oceso.
En segundo luga , y con la in ención de e i a la subje i idad del análisis
cuali a i o, se u iliza la codi icación abie a y la alidez comunica i a. Es a
he amien a, según di e sos au o es, en e ellos C eswell (1997)12, pe mi e la
e i icación del con ol en la calidad en la in es igación cuali a i a. Po o o
lado, la alidez comunica i a, como ecoge K ale (1996), es un in en o de es a-
blece los c i e ios de e dad en aquellos pun os que u iliza y consensua la
comunidad, bajo c i e ios de alidez p agmá ica de las eo ías.
Po úl imo, es a e aluación no pa e de los con enidos ni de los esul ados
ob enidos en las e aluaciones ealizadas en los dis in as uni e sidades es udia-
das, sino que empieza desde abajo con el obje i o de pode cons ui una eo ía.
En de ini i a, la pe spec i a u ilizada es induc i a o, más conc e amen e, no
se han p ede e minado los con enidos de la e aluación, ya que se ha p escin-
dido de me as, obje i os e hipó esis conc e as13. El modelo seguido se asemeja
a la e aluación que p escinde de obje i os iniciales pa a descub i pos e io -
men e las cla es y ex ae la in o mación (Sc i en, 1989).
La e aluación del Plan Nacional de E aluación y Calidad Uni e si a ia Pape s 70, 2003 91
11. Las uni e sidades isi adas ue on: Uni e sidad Pública de Na a a, Complu ense de Mad id,
Au ónoma de Mad id, Ca los III de Mad id, Poli écnica de Ba celona, Uni e sidad de
Ba celona, Pompeu Fab a de Ba celona, Poli écnica de Valencia, Uni e sidad de Valencia,
Uni e sidad del País Vasco, Uni e sidad de Deus o, Uni e sidad de Alican e, Uni e sidad
de Cas illa la Mancha, Uni e sidad de A Co uña, Uni e sidad de Có doba, Uni e sidad de
Jaén, Uni e sidad de Valladolid y Uni e sidad de G anada.
12. Ca e o (1999).
13. B yman (1988) es ablece que la inducción es un «ace camien o a las explicaciones uni e -
sales de la búsqueda del in es igado de enómenos pe siguiendo la ecogida de da os has a
que no se encuen en casos que sean inconsis en es con una explicación hipo é ica —casos
i egula es o nega i os— de un enómeno» (389).
Pape s 70 001-166 3/9/04 13:11 Página 91
p oducen los ou pu en la sociedad22. Po o o lado, es á la al a de elación
en e los da os que se ob ienen con el concep o de calidad que se maneja y su
medición, ya que, según se desp ende del discu so, no es su icien e con cuan-
i ica , sino que hay que explica , y pa a ello es necesa io u iliza ambién es a-
egias cuali a i as23.
En la e aluación de la in es igación es donde la unidad de análisis más di i-
cul ades ocasiona, ya que no queda cla o si es el cen o o el depa amen o el
esponsable de ealiza es a a ea24. Es e con lic o se ha solucionado es able-
ciendo como unidad de análisis en la in es igación los depa amen os, algo
que ha p o ocado un cie o descon ol, pues en un mismo in o me se miden
en idades muy di e en es en es uc u a y en unciones.
Como en el caso de la docencia, una de las ideas cen ales que eme gen del
discu so cuando se habla de in es igación es que no exis e una elación cla a
en e ambas dimensiones.
[…] no es á cla o cómo esos indicado es de in es igación nos an a enseña
si las enseñanzas son buenas o malas […], no se dice cómo hay que lee un
indicado de in es igación y cómo ese indicado puede in lui en las ense-
ñanzas […]. (P.5: 527-537)
El concep o de calidad en la e aluación de la in es igación es un ema que
ha ocasionado múl iples deba es, pues es e concep o no es in e p e ado de la
misma mane a en humanidades que en ciencias expe imen ales. Pa a los en e-
is ados, lo que apa ece en la guía de e aluación se asemeja más a lo que es
calidad en las ciencias na u ales, ya que se a a de cuan i ica a ículos, pa en-
es, lib os y p oyec os, po lo que conside an que se debe da más impo ancia
al con ex o.
[…] pa a e alua la in es igación se debe ía ene en cuen a el con ex o, pues
po ejemplo, que el Depa amen o de Filoso ía enga sólo un p oyec o de in es-
igación puede se más impo an e que los es que enga el Depa amen o de
Ma emá ica Aplicada […]. (P.11: 123-125)
98 Pape s 70, 2003 A. T inidad; L. Ayuso; D. Gallego; J.M. Ga cía
22. Los indicado es ou comes se ían, po ejemplo, la asa de desempleo e in aempleo, el iem-
po que a da un es udian e en encon a su p ime abajo, la elación que exis e en e el
abajo y los es udios cu sados. Pa a más in o mación de es e ipo de indicado es, éase
Pé ez Díaz y Rod íguez (2001).
23. La guía de e aluación adolece de al a de en oque cuali a i o en su elabo ación al cen a -
se en indicado es cuan i a i os que suelen medi la posición y no la calidad. E alua sólo
desde un pun o de is a cuan i a i o iene el iesgo de medi sólo can idades, es deci , se
e alúa pa a cumpli unos mínimos de calidad (modelo de me cado o emp esa ial desc i o
po Cla k (op. ci .), y no in e esa sabe cómo se consiguen y cómo se pueden mejo a .
24. Siguiendo la LRU, la unidad in es igado a de la Uni e sidad es el Depa amen o, pe o es o
no apa ece demasiado cla o en las guías de e aluación, pues és as es án diseñadas pa a e a-
lua i ulaciones o cen os. Se ol ida, así, que en es a unidad sólo se lle an a cabo a eas de
docencia y se icios, y nunca de in es igación.
Pape s 70 001-166 3/9/04 13:11 Página 98

La e aluación de la ges ión-se icios, en las di e en es con oca o ias del
PNECU, ha sido la que más di icul ades ha p esen ado a la ho a de se a a-
da. La p incipal causa de esa si uación ha sido la elección de la unidad de aná-
lisis, ya que, nue amen e, no se ha enido muy en cuen a la he e ogeneidad
de las es uc u as uni e si a ias. En es e sen ido, po ejemplo, coexis en uni-
e sidades, como la de G anada, donde los cen os son conside ados como
unidades casi independien es (hecho que, en p incipio, debe ía acili a la apli-
cación de la guía de e aluación de ges ión y se icios de mane a más ajus ada
al modelo) en e a o as uni e sidades, como la de Alican e, donde ocu e
odo lo con a io, es deci , exis e un único cen o coo dinado de odos los
se icios25. Jun o a es o, des aca la con usión e minológica en e lo que es la
e aluación de los se icios y la e aluación de la ges ión, debido a que la guía no
explica con la su icien e cla idad cómo deben se manejados es os dos con-
cep os, lo que ha p o ocado que ambos se hayan u ilizado indis in amen e.
El sis ema de e aluación es ablecido po el Consejo de Uni e sidades pa a
e alua la ges ión uni e si a ia ue el Modelo Eu opeo de Excelencia Emp esa ial
(en adelan e EFQM)26. Sin emba go, es e modelo es á imp egnado de una
iloso ía y una es uc u a muy dis in a de la que iene la uni e sidad, lo que
hace que los comi és de au oe aluación es én deso ien ados.
Es o es un p oblema go do, que es in en a me e una he amien a de e alua-
ción que es ajena al modelo de uncionamien o de la uni e sidad, cosa que no
ha ocu ido en enseñanza e in es igación, lo cual no quie e deci que no deba
implemen a se el EFQM. (P.6: 523-530)
Po o o lado, apa ecen di e sos p oblemas de meno impo ancia elacio-
nados con es e bloque, pe o que ambién pueden explica las impo an es di i-
cul ades que ha p esen ado la e aluación de la ges ión-se icios. Po ejemplo,
la di icul ad en la e minología empleada, la in a alo ación de los p ocesos
en la e aluación de la ges ión, la escasa cul u a e alua i a del PAS, la necesi-
dad de de ini an o la unidad o el se icio a e alua , como el clien e de la uni-
La e aluación del Plan Nacional de E aluación y Calidad Uni e si a ia Pape s 70, 2003 99
25. La unidad de análisis, según la guía de e aluación, cuando analizamos la ges ión y los se -
icios, ha de se el cen o, pe o, debido a la he e ogeneidad de la es uc u a uni e si a ia, hay
que hace algunas sal edades. En p ime luga , exis en uni e sidades donde los se icios
son cen ales, en es e caso la e aluación de la ges ión se end ía que hace de mane a inde-
pendien e a la enseñanza y a la in es igación. En o as uni e sidades los se icios no son
cen ales, sino que es án en los dis in os cen os. En es os casos, se end ía que hace allí la
e aluación, siendo las unidades las sec e a ías de cada acul ad, el decana o y la biblio eca.
Gene almen e, las uni e sidades que se es uc u an de es a o ma es án di ididas ambién
en depa amen os y allí es donde es á la posibilidad de in eg a odo, pues ellos in es igan,
impa en docencia y ealizan a eas de ges ión y se icios.
26. El modelo plan ea la e aluación de nue e c i e ios a a és de un cues iona io cuyas es-
pues as son es ablecidas en base a un sis ema de pun os. La pun uación ob enida es con-
as ada con el ideal de excelencia, esul ado de una consul a e ec uada a múl iples o gani-
zaciones eu opeas, lo que pe mi e de ec a di e gencias signi ica i as y de es a o ma adop a
acciones conc e as.
Pape s 70 001-166 3/9/04 13:11 Página 99
e sidad —alumno o sociedad—, la di icul ad en el es udio de los ámbi os de
decisión y las educidas dimensiones de algunos se icios que di icul an la apli-
cación del modelo EFQM.
Al ma gen de las alo aciones que se hacen de cada uno de los bloques en los
que se es uc u a la guía de e aluación, apa ecen una se ie de juicios que se epi-
en en cada uno de ellos. En p ime luga , se encuen a la eno me can idad de
ablas e indicado es a los que hay que da espues a y de los que, en muchas
ocasiones, no se sabe bien cómo han de se leídos e in e p e ados. Además, no
se es ablece cómo los indicado es de in es igación epe cu en e in luyen en los
de enseñanza, lo que p o oca la al a de cohe encia en e los in o mes. En
segundo luga , los comi és no saben cual es el e e en e de calidad, lo que ine-
i ablemen e lle a a no ene cla a la e dade a inalidad del p oceso de e a-
luación. Y, en e ce luga , exis en de iciencias en los apa ados de in es igación
y ges ión, pues se conside a que en muchos casos se a a de una guía buena
pa a e alua la docencia, pe o no an o pa a los o os dos apa ados.
El p oceso de au e aluación que se lle a a cabo en cada uni e sidad, se
comple a con la isi a del comi é de e aluación ex e na27. És a es alo ada po
los esponsables de e aluación an o en sus aspec os posi i os como nega i os.
En e los p ime os cabe des aca la olun a iedad de las pe sonas que pa ici-
pan en los comi és de e aluación ex e na, algo que a o ece la exis encia de
una ac i ud de p edisposición y mo i ación hacia esa ac i idad. Asimismo, la
isi a de ex e nos a la p opia uni e sidad pe mi e uni e saliza la calidad, po -
que se da cue po a los juicios de alo que se es ablecen, ayuda a e lexiona
en o no a la o ma en que unciona una de e minada uni e sidad y, inal-
men e, acili a compa a buscando la mejo a.
A pesa de es os aspec os posi i os, la e aluación ex e na p esen a incon-
enien es y dudas que alen izan y di icul an la ejecución comple a del p oce-
so. La olun a iedad desc i a ambién puede se una émo a, pues los espon-
sables en e is ados mani ies an que los miemb os de los comi és ex e nos son
pe sonas con poca o mación e alua i a. O o incon enien e es la poca du a-
ción de la isi a, pues en apenas dos días se iene que hace una alo ación
gene al de la unidad e aluada. Además, se ha pues o de mani ies o que exis e
en ocasiones conni encia en e los e aluado es in e nos y ex e nos, lo que lle a
a ealiza in o mes inales de e aluación au ojus i ica i os, an e el emo de
que la e aluación ex e na llegue a se conside ada inalis a, es deci , que se use
pa a clasi ica uni e sidades28.
100 Pape s 70, 2003 A. T inidad; L. Ayuso; D. Gallego; J.M. Ga cía
27. En endemos po e aluación ex e na la que ealizan, en una de e minada uni e sidad, expe -
os en e aluación llegados de o as uni e sidades, cuya a ea consis e, undamen almen e,
en supe isa los p ocesos de au oe aluación y apo a ecomendaciones que en iquezcan
la e lexión y las p opues as de mejo a a pone en ma cha en cada uni e sidad. La e alua-
ción ex e na es el segundo apa ado en el que se di ide la es uc u a de la e aluación a pa -
i del PNECU, jun o a la au oe aluación y el in o me inal.
28. F en e a es o, es á la iloso ía que inspi a al PNECU y la de los esponsables de la e aluación
ins i ucional en las uni e sidades, que de iende que las e aluaciones ex e nas sean u ilizadas
como he amien as de ayuda y complemen o a odo el p oceso.
Pape s 70 001-166 3/9/04 13:11 Página 100
La e aluación ex e na debe ía mejo a en nume osos aspec os. En p ime
luga , hab ía que p epa a de mane a más comple a y coo dinada la isi a de los
e aluado es ex e nos. Po o o lado, se debe ía e i a la ci ada conni encia
incluyendo en los comi és ex e nos a e aluado es de di e en es á eas de cono-
cimien o. Y, po úl imo, hab ía que man ene un con ac o egula en e los
miemb os del comi é ex e no e in e no pa a hace les pa ícipes de las p o-
pues as de mejo a.
Una ez ealizada la au oe aluación y la e aluación ex e na, odo el p oce-
so de e aluación iene que se ecogido en un in o me inal de i ulación que
debe i es uc u ado en pun os ue es, débiles y p opues as de mejo a29. Uno
de los apa ados más impo an es de es os in o mes son las p opues as de mejo-
a, ya que son un esumen de lo que se debe hace pa a mejo a la ins i ución.
Las p opues as deben se de alladas y cla as, además ha de queda e lejado
an o quien es el esponsable de ealiza las como su empo ización. No obs an e,
aunque es o se cumpla, no es á asegu ada del odo la implan ación de las accio-
nes, pues la úl ima palab a la ienen los equipos de gobie no. Lo ideal se ía
que las p opues as de mejo a se si ua an den o del plan es a égico de la uni-
e sidad, lo que exigi ía al comi é de au oe aluación un p oceso p e io de e le-
xión sob e cuáles son los obje i os del ec o ado y el modelo de calidad que
de iende30.
Según se desp ende del análisis, el que las p opues as de mejo a sean pues-
as en ma cha po los ec o ados es un pun o débil del PNECU, ya que és os
desde un p incipio ma can sus polí icas y as la e aluación su gen ecomen-
daciones que son con a ias a su polí ica ec o al. En el discu so ambién se
hace mucho hincapié en que las p opues as de mejo a sean ealis as, es deci ,
po ejemplo, una p opues a se ia no puede se modi ica el plan de es udios
sin ealiza un p e io análisis del con enido de las asigna u as, la adecuación
de la i ulación al me cado de abajo o la ac ualidad de los con enidos.
Las p opues as de mejo a que hacen los comi és de e aluación, son p opues as
poco sus an i as, ambiguas, no saben muy bien lo que quie en po que eal-
men e no e lo has plan eado, po que no ienes cos umb e […]. (P5: 65-67)
En de ini i a, la aplicación del PNECU y odo el p oceso de e aluación
debe e mina con la oma de decisiones, cues ión que depende de la polí ica
ec o al. A pa i de es a idea acep ada po los comi és de e aluación en cada
uni e sidad se ha descubie o que los p ocesos de e aluación y los esul ados
ob enidos poco o nada in luyen en la oma de decisión, es deci , el p oceso de
La e aluación del Plan Nacional de E aluación y Calidad Uni e si a ia Pape s 70, 2003 101
29. El in o me es elabo ado po los miemb os del comi é de au oe aluación siguiendo las eco-
mendaciones del comi é ex e no. El documen o inal que elabo a es e comi é es el que ha
de se enido en cuen a po los equipos de gobie no pa a desa olla las p opues as de mejo a.
30. Según Pei ó y Pé ez (1999), la búsqueda de la calidad equie e «un cambio de cul u a uni-
e si a ia que ponga más én asis en la o ien ación al clien e, equie a el es ablecimien o de
c i e ios de ejecución, desempeño y esul ados, así como la adopción de medidas que pe -
mi an de e mina des iaciones pa a in oduci p ocesos de mejo a» (p. 101).
Pape s 70 001-166 3/9/04 13:11 Página 101
e aluación no se ha in eg ado del odo en el mundo uni e si a io, pues oda-
ía son muchas las jun as de gobie no que cuando ienen que oma decisio-
nes no oman en cuen a la in o mación emanada de las e aluaciones31. En la
igu a 3 se e leja cómo se ha desa ollado el p oceso de e aluación en España,
donde la e aluación ha ido po un lado y los equipos de gobie no, po o o.
A pa e de los p oblemas que se han de ec ado en cada una de las pa es
en que se di ide la es uc u a de la e aluación (au oin o me, e aluación ex e -
na, in o me inal), se ap ecian una se ie de di icul ades que impiden el buen
desa ollo de la e aluación ins i ucional. És as se pod ían esumi en la al a
de cul u a y adición e alua i a, mo i ada po la c eencia de que la e alua-
ción es un p oceso de con ol y no una he amien a de mejo a. P oblemas ela-
cionados con el p oceso, como es el caso de la len i ud, el e aso de los comi-
és ex e nos, la poca c edibilidad del p oduc o y las dispu as in e nas de los
depa amen os.
Igualmen e, apa ecen di icul ades asociadas a la ob ención de da os que
e asan el p oceso. Una de esas di icul ades es el o ma o donde es án con e-
nidos los da os, que puede se muy di e en e, así como la poca ac ualización de
las bases de da os. Po úl imo, se obse an p oblemas de empo ización mo i-
ados po la olun a iedad o ac i ud con la que los comi és se omen el p o-
ceso de e aluación, que hace que algunas uni e sidades man engan una posi-
ción muy es ic a y o as sean más lexibles en el cumplimien o de los plazos de
en ega de los in o mes. Del mismo modo, los en e is ados mani ies an que
los plazos es ablecidos po el Consejo de Uni e sidades son muy co os y no pe -
mi en ni es udia la guía, ni e lexiona en p o undidad.
102 Pape s 70, 2003 A. T inidad; L. Ayuso; D. Gallego; J.M. Ga cía
31. Weiss (1977), con espec o a la no in eg ación de la e aluación en los p ocesos de oma de
decisiones, es ablece que «un epaso de la expe iencia e alua i a sugie e que los esul ados
de la e aluación no han eje cido una in luencia signi ica i a en los p og amas de decisión».
Figu a 3. P oceso de e aluación en la uni e sidad.
Fuen e: elabo ación p opia.
Pape s 70 001-166 3/9/04 13:11 Página 102
Po úl imo, en el discu so gene al ambién se ecogen di e en es deman-
das de los esponsables de los gabine es. En p ime luga , demandan la necesidad
de de ini mejo el obje o de e aluación, es deci , ene cla o cuál es la uni-
dad de análisis. En segundo luga , ei indican una mayo libe ad pa a que los
ins umen os de e aluación puedan se adap ados a cada con ex o especí ico,
eniendo en cuen a an o su es uc u a como la ama de conocimien o que se
impa a o sus planes de es udio. Como au oc í ica, c een que las alo aciones
que ellos es ablecen en los in o mes inales deben de es a más apoyadas en las
e idencias encon adas y no en las opiniones subje i as de las pe sonas impli-
cadas en el p oceso.
Jun o a las ac i idades de e aluación ealizadas den o de las con oca o ias
del PNECU, hay que des aca que algunas uni e sidades, de o ma pa alela y
debido a di e en es iloso ías espec o del Plan, han desa ollado sus p opias
inicia i as de e aluación, si bien hay o as uni e sidades que no han seguido el
Plan Nacional y han adop ado un modelo de e aluación di e en e.
An es de que nacie a el PNECU se ealiza on algunas ac i idades que se
pod ían conside a el ge men de la e aluación en España. Esas p ime as
ac i idades se cen a on en encues as al p o eso ado que, en muchas uni e si-
dades, ue on ealizadas a a és del ICE32 y que, en muchos casos, se han
man enido has a la ac ualidad, an o en aquellas uni e sidades que siguen el
plan nacional como las que no. O a se ie de ac i idades lle adas a cabo un-
damen almen e po aquellas uni e sidades que no han seguido el PNECU han
sido: encues as de sa is acción con los se icios, es udios sob e las undacio-
nes emp esa-uni e sidad e incluso alguna uni e sidad ha in en ado aplica la
no ma i a ISO a la ges ión de su ins i ución.
Una de esas ac i idades de e aluación complemen a ia, que cada ez es á
adqui iendo mayo peso en el mundo uni e si a io y que el Consejo de
Uni e sidades no ha incluido den o de las con oca o ias del PNECU, es el
Te ce Ciclo de Es udios Uni e si a ios33. Según los en e is ados, la e alua-
ción de los es udios de posg ado debe po encia se más, pues cada ez son mayo-
es las exigencias de las emp esas pa a que los alumnos alcancen dicha o ma-
ción.
4.3. Los apoyos ins i ucionales de i ados
El apoyo ins i ucional es un ac o cla e pa a que el p oceso de e aluación
salga adelan e, ya que sin él la e aluación no iene azón de se . Se pueden dis-
ingui dos o mas de mani es a es e apoyo. En p ime luga , el que p ocede
de las adminis aciones públicas, an o cen al como au onómica, que eco-
La e aluación del Plan Nacional de E aluación y Calidad Uni e si a ia Pape s 70, 2003 103
32. Ins i u o de Ciencias de la Educación.
33. El Consejo de Uni e sidades deja la inicia i a a las p opias uni e sidades o a sus comi és
de au oe aluación pa a que puedan desa olla es as ac i idades. A pesa de es o, se ha dise-
ñado una pequeña guía pa a ealiza la e aluación de e ce ciclo que ha sido sob e odo
desa ollada po algunas agencias egionales de e aluación como la andaluza (UCUA).
Pape s 70 001-166 3/9/04 13:11 Página 103

miendan, siemp e de o ma olun a ia34, que las uni e sidades pongan en
ma cha ac i idades de e aluación. Sin emba go, según los esponsables de
dichas ac i idades, és as no mues an un apoyo decidido que se aduzca en
ayudas económicas y en la c eación de las in aes uc u as des inadas a es e
in. En segundo luga , apa ece el apoyo que p ocede de la p opia uni e sidad.
És e suele se escaso y depende mucho de si la e aluación o ma pa e de la
polí ica ec o al o, si po el con a io, es una ac i idad que busca la simple
jus i icación an e el Consejo de Uni e sidades, la comunidad uni e si a ia o la
sociedad en gene al.
El apoyo ins i ucional en cada una de las uni e sidades que decidie on
en a en las con oca o ias del PNECU es a elacionado con es aspec os
esenciales: el o igen y la his o ia de las expe iencias de e aluación que se desa-
olla on en cada uni e sidad con an e io idad al plan, la posición que los
gabine es de e aluación ienen en el o ganig ama ins i ucional y, inalmen-
e, el ni el de inanciación que desde el equipo ec o al se ha des inado a es e
in.En cuan o al o igen, an es de la ap obación del PNECU, la expe iencia
e alua i a en la uni e sidad española había sido escasa. És a se limi aba a la
e aluación docen e po pa e de los alumnos y a hace algún es udio es adís ico
sob e el alumnado, casi odas ealizadas po el ICE35. Sin emba go, hubo uni-
e sidades que sí comenza on a implica se en p oyec os expe imen ales de e a-
luación impulsados desde el Consejo de Uni e sidades y la CRUE36. De igual
mane a, algunos ec o ados, desde el p incipio, mos a on una apues a cla a
po la in oducción de la cul u a de la e aluación en las polí icas uni e si a-
ias. Es o ha dado luga a que, al inicia se la aplicación del PNECU, algunas
uni e sidades pa ie an desde una posición de en aja basada en la expe iencia
adqui ida du an e años.
La posición que ocupan los gabine es de e aluación den o de la es uc u-
a o mal de cada uni e sidad mues a el g ado de apoyo ins i ucional que eci-
be la e aluación. Es signi ica i o que casi odas las unidades de e aluación, o
dependen di ec amen e del equipo ec o al, o exis e un ice ec o ado enca -
gado de diseña planes de e aluación, plani icación y calidad o al. Sin emba -
go, los esponsables indican que, a pesa de ocupa ese luga ele an e en el
o ganig ama uni e si a io, su abajo no p oduce en ningún momen o la in e-
elación en e la e aluación y la oma de decisiones.
Es a apa en e con adicción se explica po que los enca gados de coo dina
y di igi la polí ica uni e si a ia in e p e an la e aluación como un ins u-
104 Pape s 70, 2003 A. T inidad; L. Ayuso; D. Gallego; J.M. Ga cía
34. En la II Con oca o ia del PNECU concu ie on de o ma olun a ia 51 uni e sidades, lo
que suponía en 1998 un 82% de odas las uni e sidades españolas.
35. El ICE es la pieza cla e en el o igen de la e aluación de las uni e sidades en España debi-
do al conocimien o de las di e en es he amien as écnicas aplicadas a la e aluación en el
ámbi o educa i o. De es os ins i u os han su gido los dis in os gabine es y ice ec o ados
de in es igación.
36. CRUE (Consejo de Rec o es de las Uni e sidades Españolas).
Pape s 70 001-166 3/9/04 13:11 Página 104
men o de con ol y no como una he amien a pa a soluciona p oblemas, lo que
e mina di icul ando la implicación de la comunidad uni e si a ia.
El g a e pelig o que iene la e aluación es que si no implicamos a odos los
ó ganos de gobie no en el ema y se sien en cómodos al ma gen, se gene an
p opues as en pa alelo, que es lo más g a e que puede ocu i . (P 12. 419-422)
El apoyo ins i ucional se aduce ambién en el apo e económico que,
desde los dis in os agen es implicados, se haga a los p ocesos de e aluación.
La inanciación no sólo es necesa ia pa a lle a a cabo la e aluación, sino que
deben exis i los ecu sos su icien es pa a ealiza las p opues as de mejo a
que su gen una ez inalizado el p oceso, pues, en caso con a io, la e alua-
ción pie de su sen ido. El que las p opues as de mejo a se ias y ac ibles no
cuen en con los medios necesa ios es un indicado cla o que ayuda a conoce
en qué medida los equipos de gobie no ienen en cuen a los p ocesos de e a-
luación.
Los esponsables a i man que los ecu sos económicos, ma e iales y huma-
nos apo ados desde la Adminis ación cen al han sido insu icien es pa a cub i
sa is ac o iamen e los p ocesos de e aluación. Es a escasa inanciación ha hecho
que sean las comunidades au ónomas o las p opias uni e sidades las que in ie -
an en e aluación. Sin emba go, es e segundo ipo de inanciación ha sido muy
he e ogénea, pues odo ha dependiendo de la impo ancia que se die a a la
e aluación en cada polí ica ec o al y au onómica.
También apa ecen a gumen aciones que indican que, en muchas ocasio-
nes, se ha abusado de la buena olun ad de las pe sonas des inadas a ealiza
ac i idades de e aluación. Los esponsables conside an que el PNECU ha sido
muy ba a o, ya que, sin apenas ayudas económicas, se ha conseguido impli-
ca a un núme o impo an e de pe sonas y uni e sidades que han usado los
p ocesos de e aluación pa a conoce sus debilidades y o alezas y, a pa i de
ellas, plan ea p opues as de mejo a.
[…] lo que no se puede pedi a las uni e sidades es que hagan lo mismo y más
con menos ecu sos que aye […]. (P.3: 568-575)
La al a de ecu sos ha dado luga a que, a pesa del es ue zo de muchas
uni e sidades, los p ocesos de e aluación se hayan is o al e ados. És e es el
caso de la e aluación ex e na, cuya ejecución di ícilmen e puede aplica se con
escasos ecu sos.
Pa a soluciona los p oblemas su gidos po es a al a de apoyo económico,
se sugie e un aumen o de los ecu sos que asegu en la inalización de los abajos
de e aluación de un modo co ec o. Igualmen e, debe exis i una igilancia
del des ino que se da a la inanciación, a in de asegu a que la in e sión que
se haga edunde de o ma más e icaz en la calidad de la ins i ución uni e si-
a ia. Po úl imo, demandan que se p emie a aquellas uni e sidades que ea-
licen una apues a decidida po la e aluación.
La e aluación del Plan Nacional de E aluación y Calidad Uni e si a ia Pape s 70, 2003 105
Pape s 70 001-166 3/9/04 13:11 Página 105
4.4. Las consecuencias y e ec os de las p ác icas e aluado as
La implan ación del PNECU en las uni e sidades españolas ha gene ado una se ie
de consecuencias signi ica i as que han sido obje o de especial de enimien o en
es e abajo. En líneas gene ales, se conside a que la implan ación del PNECU
es sa is ac o ia, se ha pasado de no ene una he amien a pa a la e aluación, a
cons ui una ed nacional de e aluación, que ha enido su pun o más ele ado
con la c eación de la Agencia Nacional de E aluación y Ac edi ación. La es a-
egia lle ada a cabo po el Consejo de Uni e sidades, a pesa de dispone de pocos
ecu sos, ha enido un e ec o mul iplicado , ya que no sólo se habla de cul u a
de la e aluación, sino que, desde las ins i uciones educa i as, se empieza a con-
side a que los p ocesos de e aluación son una he amien a adecuada pa a
consegui es ánda es de calidad y e icacia uni e si a ia.
El PNECU ha conseguido, en pa e, el desa ollo de ac uaciones conc e as
de mejo a de la calidad y, en meno medida, ha apo ado algo de aspa encia
a la uni e sidad. Pe o es os dos obje i os son sólo un p ime paso y se debe segui
abajando en la calidad de las ins i uciones y, más conc e amen e, en es pun-
os: in o ma a la sociedad pa a una mejo oma de decisiones, o ien a las polí-
icas de asignación de ecu sos públicos y, inalmen e, es imula a las p opias
uni e sidades en sus p ocesos de pe manen e pe eccionamien o y mejo a.
O as consecuencias posi i as de la e aluación han sido la c eación de o ga-
nismos des inados a es e in, la di usión y discusión en o no al concep o de
calidad, la publicación de da os sob e la si uación de las uni e sidades y el naci-
mien o de una me odología común pa a e alua la enseñanza supe io . Como
aspec os nega i os des acan que la e aluación no iene consecuencias en la p o-
moción, los incen i os o los p esupues os, que no epe cu e lo su icien e en la
mejo a de la uni e sidad y que no se ha conseguido que és a o me pa e de
un sis ema, sino que es un islo e aislado, un apa ado bu oc á ico más.
Yo c eo que no siemp e se es á e aluando pensando que la e aluación o ma
pa e de un sis ema, y yo me he encon ado con pe sonas de o as uni e si-
dades que les he p egun ado qué les había supues o la e aluación, y me han
dicho que nada, o sea, que han hecho el es ue zo de e alua y después no ha
habido nadie que se p eocupa a de saca conclusiones pa a mejo a la uni e -
sidad. (P.2.: 178-182)
Las epe cusiones del PNECU susci an alo aciones c í icas en los es-
ponsables de los gabine es en o no a lo que ha supues o su aplicación. Lo p i-
me o que des aca es que no hay un e e en e cla o de calidad, es deci , no se
sabe muy bien si las uni e sidades es aban muy lejos o muy ce ca de ella. Po
o o lado, a pesa de econoce las i udes del PNECU, conside an que no se
han conseguido los obje i os ma cados, pues no ha habido ni la implicación
necesa ia, ni los ecu sos su icien es. Igualmen e, se des aca que muchos de los
da os que se exigen no ienen impo ancia, ya que no miden la calidad, sino la
posición de los cen os. En es a misma línea, se pueden si ua las c í icas hacia
el modelo EFQM, que, po lo gene al, no ha sido alo ado muy posi i amen e.
106 Pape s 70, 2003 A. T inidad; L. Ayuso; D. Gallego; J.M. Ga cía
Pape s 70 001-166 3/9/04 13:11 Página 106
4.5. Las pe spec i as de u u o
Las consecuencias y las alo aciones que se hacen del PNECU y su concep o
de e aluación y calidad de e minan la pa icula isión que los esponsables de
la e aluación ienen del u u o de es a ac i idad. Se coincide en conside a
que la e aluación i á cambiando poco a poco, se c ea án agencias de e alua-
ción, se apos a á po la ac edi ación y e mina án po apa ece ankings de uni-
e sidades o i ulaciones. Todos es os ac o es son impo an es, aunque en el dis-
cu so lo p ime o que se obse a es que la e aluación, como se comen ó con
an e io idad, iene que deja de se conside ada como algo aislado den o de las
uni e sidades y ha de pasa a un p ime plano donde se la conside e como una
he amien a p io i a ia pa a la oma de decisiones.
[…] con mayo pode de la e aluación ex e na, un mayo peso de los indica-
do es de endimien o y una posibilidad de hace e aluación compa a i a al
menos en esos indicado es del conjun o de unidades del es ado o a ni el in e -
nacional […]. (P5: 835:839)
El u u o de la e aluación pasa po la ac edi ación de las i ulaciones, pe o
no como se es á ealizando has a aho a, sino de o a o ma. Así, las ac edi aciones
en España se dan an es de que una i ulación empiece a unciona , mien as
que las pe spec i as de u u o y la nue a ley de uni e sidades (LOU) in ie -
en el sis ema, es deci , a pa i de aho a la ac edi ación se iene que i eno-
ando cada cie o iempo, o lo que es lo mismo, las i ulaciones debe án e a-
lua se pa a conoce si cumplen unos pa ones mínimos de calidad. Los
esponsables c een que es e sis ema es bueno, aunque econocen que plan ea cie -
as dudas, ya que se pie de la esencia de ayuda y mejo a que de iende el PNECU
y se pasa a o o sis ema donde lo único impo an e es consegui unos míni-
mos de calidad.
O a de las cues iones que empeza án a eme ge en o no a la e aluación es
la c eación de agencias de e aluación. Has a la echa, en España sólo exis en
dos, una en Ca aluña (1997) y o a en Andalucía (1998), pe o las en e is as
han e elado que en poco iempo el pano ama nacional cambia á. Pa a los es-
ponsables del p oceso de e aluación en las uni e sidades, la c eación de es e ipo
de agencias es un paso muy impo an e, ya que pe mi i á c ea nue os mode-
los, ene localizada la in o mación, do a a las uni e sidades de un e e en e
donde acudi , e o za las inicia i as de e aluación y desa olla p og amas espe-
cí icos pa a mejo a los sis emas uni e si a ios. El desa ollo de es e ipo de agen-
cias debe i acompañado de o a de ámbi o nacional que debe enca ga se de
coo dina odos los p ocesos de e aluación y de es ablece unos c i e ios bási-
cos compa ibles con las p ác icas de e aluación igen es en la Unión Eu opea.
5. Conclusiones
La implan ación de un plan nacional de e aluación en las uni e sidades espa-
ñolas en 1995, ue el esul ado de di e sas expe iencias e alua i as encamina-
La e aluación del Plan Nacional de E aluación y Calidad Uni e si a ia Pape s 70, 2003 107
Pape s 70 001-166 3/9/04 13:11 Página 107