Evaluación del impacto de un programa de formación sobre el tiempo de búsqueda de un empleo

© In es igaciones Regionales. 19 – Páginas 51 a 74 Sección A í c u l o s E aluación del impac o de un p og ama de o mación sob e el iempo de búsqueda de un empleo José Manuel Cansino Muñoz-Repiso *, An onio Sánchez B aza ** RESUMEN: Es e a ículo es ima el e ec o p omedio del P og ama de Escuelas Talle y Casas de O icios sob e el pe iodo necesa io pa a encon a un empleo. Se han u ilizado es es imado es: el de ponde ación sob e la p obabilidad condicional de pa icipación, el es imado bie ápico de Heckman y el es imado de empa eja- mien o. Pa a los pa icipan es en el p og ama, el núme o de días has a encon a un empleo se educe en 471, 446 y 467, espec i amen e, dependiendo del es imado u ili- zado. Se encuen a e idencia consis en e ace ca de que el p og ama educe el iempo necesa io pa a encon a un empleo. Clasi icación JEL: J24, J68. Palab as cla e: E aluación de p og amas de o mación, polí icas públicas, p o- pensión condicional de pa icipación, es imado de Heckman, empa ejamien o. Assessing he impac o a aining p og am on how long a job sea ch ABSTRACT: This pape es imes he a e age e ec o he Spanish T aining Schools P og am on he pe iod needed o ind a job. Th ee me hods ha e been de- eloped: weigh ing on he p opensi y sco e, Heckman’s es ima o and p opensi y sco e-ma ching. Fo he pa icipan s in he p og am, he numbe o days up o inding a job dimi- nishes in 471, 446 and 467, espec i ely, depending on he used es ima o one. The e is a consis en e idence ac oss me hods ha he p og am e alua ed educes he necessa y ime o ind a job. 51 Recibido: 21 de junio de 2009 / Acep ado: 26 de junio de 2010. * Uni e sidad de Se illa. Depa amen o de Análisis Económico y Economía Polí ica. Facul ad de CC. Económicas y Emp esa iales. A da. Ramón y Cajal, núm. 1. 41018 Se illa. e-mail: @jmcansino@ us.es. Telé ono: + 34 954 55 75 28. Fax: + 34 954 55 76 29. ** Uni e sidad de Se illa. Depa amen o de Análisis Económico y Economía Polí ica. Facul ad de CC. Económicas y Emp esa iales. A da. Ramón y Cajal, núm. 1. 41018 Se illa. e-mail: @[email p o ec ed]. Telé ono: + 34 954 55 75 29. Fax: + 34 954 55 76 29. 03-CANSINO.indd 51 10/5/11 11:58:34 52 Cansino, J. M. y Sánchez, A. JEL Classi ica ion: J24, J68. Keywo ds: T aining p og ams e alua ion, public policies, p opensi y sco e, Heck- man’s wo-s age es ima o , ma ching. 1. In oducción 1 De acue do con Heckman, Clemen s y Smi h (1997), gene almen e se acep a que los p og amas sociales ienen un impac o di e en e en unción de las dis in as ca ac e ís icas que p esen an los indi iduos pa icipan es. La asignación adecuada de los indi iduos en e un conjun o de p og amas al e na i os puede con e i se en una cues ión c ucial en las decisiones polí icas. Con olando las ca ac e ís icas di e enciado as (co a iables) de los indi iduos y ob eniendo in o mación del e ec o p omedio que un de e minado p og ama p o o- ca sob e una a iable espues a de in e és, el deciso público puede de e mina qué p og ama p o oca ía el mejo esul ado sob e los pa icipan es po enciales, p ecisa- men e eniendo en cuen a el e ec o medio de los p og amas sob e subpoblaciones. Es e e ec o p omedio se ía es imado de mane a p e ia a la asignación de ini i a. El bienes a social puede aumen a si los deciso es públicos siguen una egla de asig- nación que les pe mi a de e mina qué indi iduos deben asigna se a qué p og amas. Manski (2001) eo izó sob e es a cues ión pa a el caso de un conjun o ini o de a- amien os o p og amas. Cansino y Román (2007) han explo ado las posibilidades de es a cues ión pa a el caso del T ibunal de Cuen as español. El obje i o de es e a ículo es es ima el e ec o p omedio de un a amien o bina io sob e una a iable espues a escala a pa i de es ipos de es imado es ípicamen e u ilizados en la li e a u a especializada, es imando la e icacia de es e a amien o a a és de un análisis mic oeconómico. Dicho a amien o es el P og ama de Escuelas Talle y Casas de O icios desa ollado en la p o incia de Se illa en e 1997 y 1999. Los es imado es u ilizados son los de ponde ación, el es imado bie ápico de Heckman y el es imado de empa ejamien o, espec i amen e. En p ime luga , se ob ienen los es imado es median e la ponde ación sob e dicha p obabilidad condicio- nal, lo que pe mi e la compa ación de los esul ados ob enidos po ambos mé odos y e i ica su consis encia. En segundo luga , aplicando el p ocedimien o bie ápico de Heckman, ampliamen e empleado en modelos con p oblemas de sesgo de selección, se ob iene ambién un es imado pa amé ico de los e ec os del p og ama. En e ce luga , se ob ienen los es imado es de empa ejamien o sob e la p obabilidad condi- cionada de pa icipación, que esul an los más u ilizados en los abajos empí icos ealizados en es e ámbi o. Se ha seleccionado la p o incia de Se illa po se la zona donde más ampliamen- e se ha desa ollado es e p og ama de o mación en el ámbi o de Andalucía has a el 1 Los au o es ag adecen los comen a ios y suge encias de dos e aluado es anónimos que han con- ibuido a mejo a la e sión o iginal. No obs an e, los posibles e o es son únicamen e esponsabilidad de los i man es. 03-CANSINO.indd 52 10/5/11 11:58:34 E aluación del impac o de un p og ama de o mación sob e el iempo de búsqueda de un empleo 53 momen o. La e aluación se lle a a cabo es imando el e ec o p omedio del p og ama sob e el iempo que han necesi ado los indi iduos de la mues a pa a encon a un empleo. Los indi iduos son pe sonas desempleadas con edades comp endidas en e los dieciséis y los ein icinco años. La di icul ad pa a el acceso a los mic oda os ha obs aculizado en España es e ipo de e aluaciones, ampliamen e desa olladas en países como F ancia, Alemania, Reino Unido y Es ados Unidos 2. En elación con los pa icipan es en las polí icas o ma i as, no exis en da os que puedan conside a se comple os sob e el núme o de asis en es a cu sos de o mación no eglada en España. La co a, pe o ambién he e ogénea, du ación de los cu sos impide que es adís icas como la EPA cap en los sucesos o ma i os con el igo su icien e (Ma o y Cue o, 2008). Es e a ículo con ibuye a la li e a u a en el sen ido de que no abundan las in es iga- ciones de ipo mic oeconómico sob e las polí icas ac i as del me cado de abajo. Apa - e de los abajos de Ma o (2002), A ellano (2005, 2009), Ma o y Cue o (2008, 2009), y las apo aciones de Cansino y Sánchez (2008, 2009) 3, no han p oli e ado e aluaciones simila es en España basadas en mé odos obse acionales. Sob e la e sión p elimina de Cansino y Sánchez (2008), es e a ículo añade el uso del es imado de empa ejamien- o y con ex ualiza las conclusiones en in es igaciones desa olladas en o os países. El a ículo se es uc u a en seis apa ados. T as la in oducción, en el apa ado 2 se desc ibe de alladamen e el p og ama de o mación e aluado. En el apa ado 3 se expo- ne la in o mación con enida en la base de da os u ilizada, mien as que en el apa ado 4 se desc iben el modelo y las a iables que en él in e ienen. En el apa ado 5 se p o- cede a la aplicación de las écnicas de e aluación p opues as sob e las obse aciones mues ales con enidas en la base de da os pa a la es imación del e ec o p omedio del p og ama de o mación. El apa ado 6 con iene las p incipales conclusiones. 2. El p og ama de o mación de las Escuelas Talle y Casas de O icios El p og ama de o mación de las Escuelas Talle y Casas de O icios se c eó en 1985, como una medida de Fomen o de Empleo Ju enil 4 con la inalidad de omen a el ap endizaje de un o icio o p o esión. 2 Véanse Ca d y Sulli an (1988) y Manski y Ga inkel (1992) en Es ados Unidos, Bonnall, Fougè e y Sé andon (1997) en F ancia, And ews, B adley y Upwa d (1999) y Blundell e al. (2004) en el Reino Unido, Be gemann, Fi zenbe ge y Speckesse (2005) en Alemania y Pa k e al. (1996) en Canadá, en e o as. 3 En Cansino y Sánchez (2009) se ealiza una e aluación basada en un mé odo al e na i o al de selección sob e obse ables; el es imado de di e encias en di e encias. El esul ado ob enido po es os au o es del e ec o p omedio del p og ama sob e los pa icipan es es simila al que se ob iene en el p esen- e abajo a pa i de las co a iables obse ables manejadas. Conc e amen e 494 días. Po es a azón, se a ibuye a dichas co a iables capacidad explica i a su icien e, encon ándose jus i icada la ealización de una e aluación al e na i a a pa i de la selección sob e obse ables. No obs an e, se es conscien e de las limi aciones que es o supone. 4 Pa a una jus i icación del p og ama nos emi imos a la memo ia sob e la si uación socioeconómica y labo al elabo ada po el Consejo Económico y Social (1995, p. 296). 03-CANSINO.indd 53 10/5/11 11:58:35 54 Cansino, J. M. y Sánchez, A. Es e p og ama comenzó a desa olla se con ca ác e expe imen al y con ámbi o nacional bajo la di ección del Ins i u o Nacional de Empleo. Pos e io men e, se lle ó a cabo un p oceso p og esi o de ans e encia de las compe encias de su ges ión a las Comunidades Au ónomas, de mane a que es e p og ama pasó a desa olla se po los Se icios Públicos Regionales de Empleo de cada Comunidad Au ónoma. En la ac ualidad, es e p og ama se ige po una O den del Minis e io de T abajo y Asun os Sociales 5, y en el ámbi o egional andaluz, po una O den de la Conse- je ía de Empleo y Desa ollo Tecnológico 6. La p o isión del p og ama se ealiza de o ma descen alizada en di e en es cen os o ma i os median e con oca o ias públicas. En de ini i a, el obje i o de es e p og ama es inco po a al me cado de abajo a jó enes desempleados meno es de ein icinco años, median e su cuali icación y p o- esionalización, al e nando la o mación eó ica y la p ác ica p o esional a a és de su pa icipación en la ealización de ob as y se icios de u ilidad pública. Los pa icipan es en es e p og ama debe án habe cumplido dieciséis años y se meno es de ein icinco años, es a desempleados e insc i os en los se icios públicos de empleo y cumpli los equisi os es ablecidos pa a o maliza un con a o pa a la o mación. La implemen ación del p og ama se ealiza en dos e apas, una p ime a de ca- ác e o ma i o y una segunda e apa de o mación en al e nancia con el abajo y la p ác ica p o esional. En el caso de las Escuelas Talle , la du ación de ambas e apas no se á in e io a un año ni supe io a dos, di idida en ases de seis meses, mien as que en el caso de las Casas de O icios, la du ación de cada una de es as e apas queda es ablecida en seis meses. En la abla 1 se ecoge la e olución en oda España del núme o de p oyec os den o del P og ama de Escuelas Talle y Casas de O icios a lo la go del pe iodo 1995-2006. Asimismo, en la abla 2 se ecoge la e olución del núme o de pa icipan- es en es os p oyec os de Escuelas Talle y Casas de O icios a lo la go del pe iodo 1995-2006, alcanzándose el máximo en el año 1998 con 60.450 alumnos. Aunque la di e sidad de agen es y de p og amas di icul a la ob ención de se ies iables de pa icipan es en inicia i as de o mación pa a desempleados, Ma o y Cue o (2008, p. 62), a pa i de da os de la OCDE, manejan la ci a de 500.000 pe sonas desempleadas/año en o mación du an e los úl imos años no en a. Po an o, pa a el ienio 1997-1999, los alumnos de las Escuelas Talle y Casas de O icios ep esen a- ban el 11,26% de las pe sonas desempleadas en o mación. 5 OM del Minis e io de T abajo y Asun os Sociales, de 14 de no iemb e de 2001, po la que se e- gulan el p og ama de Escuelas Talle y Casas de O icios y las Unidades de P omoción y Desa ollo y se es ablecen las bases egulado as de la concesión de sub enciones públicas a dichos p og amas. 6 O den de 8 de ma zo de 2004, de la Conseje ía de Empleo y Desa ollo Tecnológico, po la que se egulan los P og amas de Escuelas Talle , Casas de O icios, Talle es de Empleo y Unidades de P o- moción y Desa ollo y se es ablecen las bases egulado as de la concesión de ayudas públicas a dichos p og amas. 03-CANSINO.indd 54 10/5/11 11:58:35 E aluación del impac o de un p og ama de o mación sob e el iempo de búsqueda de un empleo 55 Tabla 1. Escuelas Talle y Casas de O icios: núme o de p oyec os po año (1995-2006) 1995 1996 1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 Escuelas Talle 912 949 941 1043 1021 1106 973 971 907 788 873 882 Casas de O icios 360 450 347 468 458 374 356 288 194 181 159 161 To al 1.272 1.399 1.288 1.511 1.479 1.480 1.329 1.259 1.101 969 1.032 1.043 Fuen e: Se icio Público de Empleo Es a al. Tabla 2. Escuelas Talle y Casas de O icios: núme o de plazas disponibles po año (1995-2006) 1995 1996 1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 Escuelas Talle 37.419 39.388 40.143 44.636 42.909 44.868 36.888 36.404 32.350 27.220 27.481 26.732 Casas de O icios 11.138 13.544 10.336 15.814 15.211 10.214 9.436 7.345 7.065 4.357 3.556 3.450 To al 48.557 52.932 50.479 60.450 58.120 55.082 46.324 43.749 39.415 31.577 31.037 30.182 Fuen e: Se icio Público de Empleo Es a al. 03-CANSINO.indd 55 10/5/11 11:58:35 56 Cansino, J. M. y Sánchez, A. 3. La base de da os La base de da os u ilizada pa a la e aluación («BASEVAFOR») ha sido cons- uida a pa i de obse aciones de indi iduos pa icipan es en los p og amas de o - mación desa ollados po las Escuelas Talle y Casas de O icios en la p o incia de Se illa a lo la go de la década de los años no en a. De en e odos los pa icipan es, se ha seleccionado a aquellos indi iduos que han pa icipado en un p og ama de los concluidos a lo la go del año 1999, úl imo año con da os desglosados disponibles cuando se inició la cons ucción de es a base de da os. El núme o o al de pa icipan es que o man es e g upo es de 1.528 indi iduos. De en e es os indi iduos que cons i uyen la población obje i o, se ha seleccionado de o ma alea o ia una mues a compues a po 150 indi iduos que cons i uyen el g upo de pa icipan es. De o ma pa alela, se ha seleccionado ambién un g upo de con ol o mado po 75 indi iduos, con ca ac e ís icas simila es a los del g upo de pa icipan es. El g upo de con ol ha sido elabo ado pa a es a e aluación po la Delegación P o incial de Se illa del Se icio Andaluz de Empleo (SAE). Pa a la cons ucción del g upo de con ol se conside ó, en p ime luga , la posi- bilidad de cons ucción de un g upo de con ol in e no s. ex e no (F iedlande e al., 1997, p. 1817). Sin emba go, los da os suminis ados po el Se icio Andaluz de Em- pleo no incluían la in o mación necesa ia pa a la cons ucción del p ime o de ellos. Las solici udes hechas po los au o es en al sen ido esul a on in uc uosas. En el abajo se ha op ado po la cons ucción de un g upo de con ol ex e no. En es e ipo de e aluaciones es á jus i icada la u ilización de un g upo de con ol ex e - no. P ecisamen e F iedlande e al. (1997) opinan que los g upos de con ol ex e nos se han impues o en la li e a u a e alua o ia (Ashen el e , 1978; Heckman, Smi h y Tabe , 1998; Dehejia y Wahba, 1999). Pa a mayo abundamien o, F iedlande e al. (1997, p. 1817) a i man, en elación a los g upos de con ol in e no, que siemp e hay ca ac e ís icas obse ables en las que di ie en los desca ados de los pa icipan es, y en ellas se basan los ges o es del p og ama pa a echaza los. En el mismo sen ido, Bell e al. (1995) conside an que los solici an es desca ados, po de inición, di ie en de los seleccionados sólo en ac o es (obje i os o subje i os) obse ables pa a el pe sonal que lle a a cabo la selección. Adicionalmen e, el echazo po p oblemas de cupo puede p o oca a amien os dis- c imina o ios que ulne an de echos undamen ales (Cansino y Román, 2007). Más ecien emen e, Regne (2002) conside a dos g upos de con ol y ambos son ex e nos. No obs an e, Raam y To p (2002) usan dos g upos de con ol, uno in e no y o o ex e no. En es e a ículo se ha conside ado que, sin que exis a unanimidad en la li e a u- a, exis e sopo e su icien e baja desa olla es e ipo de e aluaciones con g upos de con ol ex e no. 03-CANSINO.indd 56 10/5/11 11:58:35 E aluación del impac o de un p og ama de o mación sob e el iempo de búsqueda de un empleo 57 Las p opo ciones es ablecidas, el 10% de la población obje i o pa a el g upo de pa icipan es y la elación 2 a 1 en e ambos g upos, se co esponde con las mismas p opo ciones man enidas en o os es udios p e ios omados como e e encia. Las dimensiones de la base de da os son homologables a las e aluaciones simila es esu- midas en Dehejia y Wahba (1999, p. 1056, abla 1) 7. Los da os han sido suminis ados pa a es a in es igación po el INEM y po el Se icio Andaluz de Empleo (SAE). Pa a los indi iduos de ambos g upos, la base de da os ecoge in o mación elacionada con su ida labo al, incluyendo da os e e en es a los episodios de desempleo, a las solici udes de demanda de empleo de los indi iduos, e c. También incluye in o mación e e en e a las a iables e- le an es que an a se u ilizadas pa a el desa ollo de la e aluación, en e las que se conside an edad, sexo y zona geog á ica de esidencia. O os da os como el sec o económico en el que los indi iduos encuen an empleo, el ipo de con a o ealizado o la du ación del mismo, no han podido inco po a se a la BASEVAFOR, aun cuando su a amien o en iquece ía p e isiblemen e las conclusiones de la in- es igación. La in o mación disponible ampoco pe mi e hace una e aluación de los e ec os del p og ama a medio plazo, po lo que no esul a posible sabe en qué medida los e ec os de la o mación se man ienen a lo la go del iempo. 4. Ca ac e ís icas del modelo 4.1. De inición de las a iables D e Y El desa ollo de la e aluación de polí icas públicas se ha bene iciado del uso de la in e encia causal es adís ica 8. Uno de los esul ados más sob esalien es ha sido el Modelo de Resul ados Po enciales —POM—, en el que las a iables ele an es son compa adas pa a el caso de indi iduos pa icipan es y no pa icipan es en de e mina- das inicia i as públicas 9. Un desa ollo p olí ico del POM, aplicado a la e aluación de p og amas públicos de o mación, se debe a Roy (1951) y Rubin (1974). Es e a ículo oma como e e encia el Modelo Causal de Roy-Rubin 10 —RRM—. 7 La elación 2/1 nos si úa en la línea de es udios de e aluación p e ios como es el del P og ama JTPA. Es e p og ama asociado a la «Job T aining Pa ne ship Ac —JTPA—» es adounidense ue obje o de muy in luyen es es udios e alua o ios de en e los que des acan los de Heckman, Ichimu a y Todd (1997) y el de Heckman e al. (1998). 8 Una e e encia amplia del en oque eó ico de la causalidad y su conside ación en los expe imen os alea o ios puede encon a se en Holland (1986) y Pea l (2000). Pa a el caso conc e o de los p og amas de o mación, esul an abajos pione os el ya ci ado de Rubin (1974) y el de Heckman y Ho z (1989). 9 Came on y T i edi (2005, pp. 31 y ss.) exponen las en ajas del Modelo de Resul ados Po enciales en e a o os modelos al e na i os. 10 Pa a es ima la causalidad en el RRM se ha de ecu i al supues o clásico de independencia de los esul ados po enciales indi iduales de la pa icipación de o os indi iduos, conocida como «S able Uni T ea men Value Assump ion» (SUTVA). En consecuencia, no se ienen en cuen a los e ec os de equilib io gene al —Came on y T i edi (2005, p. 872)—. 03-CANSINO.indd 57 10/5/11 11:58:35 58 Cansino, J. M. y Sánchez, A. De acue do con el modelo RRM, se de ine D como la a iable bina ia que indica la pa icipación de los indi iduos de la mues a en el p og ama e aluado, que oma los alo es 1 o 0 dependiendo de si el indi iduo conside ado ha pa icipado o no. De es a o ma, Di = 1 indica á que el indi iduo i es un indi iduo pa icipan e y Di = 0 indica á que i es un indi iduo no pa icipan e (indi iduo de con ol). Po o a pa e, el escala Y es la a iable espues a a pa i de la cual se e alua án los e ec os p omedios del p og ama. Se de ine Yi como la capacidad del indi iduo i pa a encon a un empleo, y mues a cuán o iempo necesi a emplea has a encon- a lo 11. La cons ucción de es a a iable se ajus a a la siguien e exp esión: Y i %1.N. o de días anscu idoshas a que el indi iduoiencuen aunempleo Tiempo o aldel pe iododeobse ación conside ado(1) a La elección de la a iable espues a se jus i ica en que los indi iduos de la mues- a, an o los pa icipan es como los de con ol, es án inicialmen e desempleados e incluidos en el censo o icial de demandan es de empleo. Al a a se de indi iduos muy jó enes y sin o mación, la ayec o ia an e io a la pa icipación en la Escuela Talle es inexis en e o p ác icamen e i ele an e. Adicionalmen e, pa a la pa icipa- ción en el p og ama no se equie e expe iencia labo al p e ia. Es e mismo c i e io ha sido seguido po el Se icio Andaluz de Empleo pa a la selección del g upo de con ol. Po esa azón, esul a ele an e pa a la e aluación del p og ama conside a una a iable espues a que nos pe mi a medi la capacidad de es as pe sonas pa a encon a empleo 12. El pe iodo de obse ación conside ado ha sido de es años 13 (1.095 días). Se em- pieza a compu a es e pe iodo desde el momen o en el que los pa icipan es inalizan el p og ama de o mación (gene almen e al inal de 1999), o bien el 1 de ene o de 2000 pa a los indi iduos de con ol 14. El alo de Y a ía en e 0 y 1. Si Y es igual a 0, signi ica que el indi iduo i no ha encon ado empleo du an e el pe iodo conside ado. És e es el peo escena io pa a la e icacia del p og ama. Un alo de Y p óximo a 1 indica á que el indi iduo i ha encon ado un empleo en un co o pe iodo de iempo. 11 Pa a una in es igación pos e io en la que se disponga de da os más desag egados es á p e is a la descomposición de es a a iable espues a Y en dos a iables. La p ime a nos pe mi i ía conoce el e ec o p omedio del p og ama sob e la p obabilidad indi idual de encon a un empleo. La segunda pod ía de i- ni se como el iempo necesa io pa a encon a un empleo condicionado al subconjun o de desempleados (pa icipan es y no pa icipan es) que han encon ado un abajo. 12 En de ini i a, el P og ama de Escuelas Talle y Casas de O icios iene como obje i o «cons i ui se como una medida de inse ción en el me cado de abajo de jó enes desempleados meno es de ein icinco años». 13 Se ha conside ado un pe iodo de iempo ela i amen e ele ado, es años (1.095 días), po los especiales p oblemas de es e colec i o pa a encon a empleo. 14 Fecha ijada como pun o de pa ida pa a el g upo de con ol ya que coincide con el pun o de pa - ida ambién pa a la p ác ica o alidad de los indi iduos del g upo de pa icipan es. 03-CANSINO.indd 58 10/5/11 11:58:35 E aluación del impac o de un p og ama de o mación sob e el iempo de búsqueda de un empleo 59 4.2. El e ec o p omedio del p og ama En los desa ollos del POM y del RRM, los alo es indi idualizados de las a- iables ele an es pueden ex ae se bien de expe imen os alea o ios o bien de da os obse acionales. Ambos en o nos condiciona án no ablemen e la e aluación y da án luga a dis in os desa ollos me odológicos. Sin emba go, en las ciencias sociales, los expe imen os alea o ios se en en an a impo an es p oblemas elacionados con su ele ado cos e, posibles limi aciones de índole mo al, el desgas e de la mues a (o e ec o abandono) y complicaciones de i a- das del conocido como e ec o Haw ho ne 15 —Bu less (1995) y Came on y T i edi (2005)—. Es as di icul ades pueden sal a se median e el uso de da os obse acionales 16. En es os casos, Rosenbaum (1999, p. 266) a i ma que el in es igado puede dise- ña un g upo de a amien o y un g upo de con ol a pa i de los indi iduos con el obje i o de ep oduci un escena io lo más pa ecido posible a un expe imen o alea o io 17. No obs an e, los modelos que incluyen sucesos con a ac uales (como que un indi iduo pa icipe y no pa icipe, al mismo iempo, en un p og ama de o mación) no pe mi en es ima e ec os causales indi iduales. Holland (1986) lo denominó como el «p oblema undamen al de la iden i icación causal», que obliga a op a po la es i- mación de un e ec o p omedio. Pa icula men e, el e ec o p omedio sob e los pa icipan es en el p og ama 18, ATET («A e age T ea men E ec on he T ea ed»), se ob iene como alo medio espe ado de la di e encia en e los esul ados po enciales Y1 e Y0, pe o sólo con es- pec o a los indi iduos que han pa icipado en el p og ama (es o es, condicionada al alo D = 1): ATET %E[Y 1 .Y 0 D%1] (2) a Los dis in os mé odos de e aluación a an de cons ui el suceso con a ac ual a a és de una ede inición del p oblema, que implica pasa del ni el indi idual de la e aluación al ni el poblacional (Heckman, Lalonde y Smi h, 1999). 15 Es e e ec o consis e, esencialmen e, en que los indi iduos cambian su compo amien o po el solo hecho de sabe que es án siendo es udiados. 16 Los es udios pione os en es e ámbi o se desa olla on en Medicina. Como in oducción a los plan eamien os p esen ados po los mé odos obse acionales emi imos a dos de los ejemplos a los que ecu e Rosenbaum (1995, pp. 2 y ss.) en su exposición sob e es os mé odos: Coch an (1968) y Came on y Pauling (1976). 17 Conocidos abajos basados en es os mé odos cuasi-expe imen ales son, en e o os, los de Kie e (1979) y Bassi (1984). Ambos abajos son comen ados po Lalonde (1986) en su es udio compa a i o en e los mé odos expe imen ales y no expe imen ales. 18 Pese a que en es e a ículo sólo se u iliza el ATET, en Imbens (2004) se esumen una se ie de e ec os medios que han sido conside ados po la li e a u a. 03-CANSINO.indd 59 10/5/11 11:58:35 66 Cansino, J. M. y Sánchez, A. duos de la mues a median e el Modelo P obi , mien as que en la abla 7 se ecoge la es imación de es a p obabilidad pa a cada posible indi iduo, en unción de los dis in os alo es que puede adop a el ec o de co a iables X3 = (X1, X2, X3). Tabla 7. P opensión a pa icipa en unción de los posibles alo es del ec o de co a iables X3 = (X1, X2, X3) según el Modelo P obi Homb e Muje Zona 1 Zona 2 Zona 3 Zona 4 Zona 1 Zona 2 Zona 3 Zona 4 17 años 0,537092 0,636943 0,657695 0,635882 0,313141 0,409132 0,430973 0,408034 18 años 0,586537 0,682903 0,702538 0,681896 0,358889 0,458488 0,480714 0,457367 19 años 0,634645 0,726203 0,744490 0,725261 0,406757 0,508494 0,530757 0,507366 20 años 0,680721 0,766358 0,783123 0,765491 0,456062 0,558366 0,580319 0,557250 21 años 0,724162 0,803015 0,818146 0,802230 0,506053 0,607328 0,628636 0,606241 22 años 0,764480 0,835956 0,849398 0,835257 0,555950 0,654647 0,675006 0,653605 23 años 0,801313 0,865097 0,876852 0,864483 0,604975 0,699663 0,718811 0,698680 24 años 0,834439 0,890472 0,900591 0,889942 0,652390 0,741820 0,759548 0,740906 25 años 0,863765 0,912224 0,920798 0,911773 0,697532 0,780683 0,796839 0,779847 26 años 0,889321 0,930579 0,937730 0,930201 0,739839 0,815950 0,830443 0,815197 Fuen e: Elabo ación p opia. Finalmen e, se asigna a cada indi iduo (pa icipan es y de con ol) el alo es i- mado de su p obabilidad condicional de pa icipación, as lo que se p ocede a calcu- la el es imado del ATET (a 4 ATET ) a (ponde ando los alo es obse ados de la a iable espues a Y a pa i de la p obabilidad condicional de pa icipación ob enida pa a cada indi iduo, siguiendo la exp esión 23: a 4 ATET PONDERACIÓN %1 n 1 n ; i%1 Y i .D i .e4(X i ) 1.e4(X i )(9) a donde e4(X i ) a es el alo es imado de la p obabilidad condicional de pa icipación pa a el indi iduo i sob e el ec o X de a iables p ede e minadas. 23 La ob ención del es imado basado en la ponde ación sob e la p obabilidad condicional de pa i- cipación se ealiza de acue do con Hi ano, Imbens y Ridde (2003), quienes lle an a cabo el desa ollo de es e es imado del ATET (a 4 ATET ) a ob eniendo como exp esión inal del mismo: 0% n ; i%1 e4(X i ).AY i .D i e4(X i ) .Y i .(1 .D i ) 1.e4(X i ) .a 4 ATET B a 03-CANSINO.indd 66 10/5/11 11:58:38 E aluación del impac o de un p og ama de o mación sob e el iempo de búsqueda de un empleo 67 Aplicando es a exp esión, los esul ados apa ecen ecogidos en la abla 8. El es imado ob enido del ATET (a 4 ATET ) a oma un alo posi i o, e idenciando un e ec o causal a o able del p og ama sob e los pa icipan es, cuya capacidad de inse ción labo al se e inc emen ada, en é minos medios, en 0,430409. Es o supone, a pa i de la exp esión (1), una educción en el iempo de búsqueda de empleo de 471 días. Tabla 8. Cálculo del es imado a 4 ATET a median e la ponde ación sob e la p obabilidad condicional de pa icipación Coe icien e Valo del coe icien e E o es ánda -es adís ico P obabilidad a 4 ATET a 0,430409 0,056 7,685875 0,0000 Fuen e: Elabo ación p opia. 5.2. El es imado bie ápico de Heckman En segundo luga , a pa i de los alo es es imados de la p obabilidad condicio- nal de pa icipación, es posible ob ene un es imado pa amé ico de los e ec os del p og ama de o mación sob e los indi iduos pa icipan es median e la aplicación del p ocedimien o bie ápico de Heckman 24 (1979), lo que pe mi e la compa ación de los esul ados con los ob enidos en el apa ado an e io . De acue do con es e p ocedimien o, pa a co egi el posible sesgo de selección, en una p ime a ase se plan ea la pa icipación o no de los indi iduos en el p og ama de o mación, y, en una segunda ase, cuál es el e ec o p oducido, en e los indi iduos pa icipan es, sob e la a iable espues a Y median e una eg esión po MCO. La es- imación median e MCO en la segunda e apa se ha á a pa i de un modelo lineal que se ajus a a la exp esión: Y%k!aD!pe4 (X) !e(10) a donde Y es la a iable espues a (capacidad de inse ción labo al) y D es la a iable indica i a de la pa icipación en el p og ama, ag egándose e4 (X) a ( alo es de la p obabilidad condicional de pa icipación es imados en la p ime a e apa) como una a iable explica i a. Los pa áme os que in e ienen en el modelo son µ, que ecoge el e ec o ijo en el modelo, ε , que ecoge el e o alea o io del modelo, cuyo alo medio se á ce o E[eD,e4 (X) ]%0, a y α , pa áme o que pe mi e de e mina el e ec o p omedio del p og ama sob e los indi iduos pa icipan es. El pa áme o α se á, en es e caso, el es imado bie ápico del ATET (a 4 ATET ) a . 24 El cálculo del es imado bie ápico sigue las p opues as de Heckman (1979) y Heckman y Vy lacil (2005). 03-CANSINO.indd 67 10/5/11 11:58:39 68 Cansino, J. M. y Sánchez, A. Realizada la eg esión po MCO siguiendo las especi icaciones de es e modelo, los esul ados ob enidos apa ecen en la abla 9. Tabla 9. Cálculo del es imado a 4 ATET a en dos e apas a pa i de la p obabilidad condicional de pa icipación Va iable Dependien e: Y (Capacidad de inse ción labo al) Mé odo: MCO Va iable Coe icien e Valo del coe icien e E o es- ánda -es adís ico P obabilidad E ec o ijo µ –0,100162 0,111391 –0,899191 0,3695 D α 0,407455 0,050691 8,037953 0,0000 e4 (X) a σ 0,609559 0,177733 3,429642 0,0007 Coe . De e m. (R2) 0,354277 F-es adís ico 60,90033 R2-ajus ado 0,348460 P ob. (F-es adís ico) 0,000000 Fuen e: Elabo ación p opia. Pa a co egi los posibles p oblemas de he e oscedas icidad, los alo es del - es adís ico apa ecen ajus ados po el mé odo de Whi e. Los alo es del -es adís ico (8,037953) y de su p obabilidad asociada (0,0000) pe mi en echaza la hipó esis nula de que el alo del coe icien e α sea igual a ce o, luego la a iable explica i a D esul a signi ica i a en el modelo. El ajus e p esen a ambién signi ica i idad de la p obabilidad condicional de pa icipación. En elación con el e ec o ijo, el ajus e p esen a no signi ica i idad del é mino independien e. La signi ica i idad conjun a de odos los pa áme os es imados po el modelo se puede de i a ambién a pa i del alo de la p obabilidad del con as e de la F de Snedeco , que en es e caso egis a un alo de 0,0000, lo que pe mi e la acep ación de la signi icación conjun a de odos los pa áme os del modelo. Es deci , pueden conside a se odos los pa áme os del modelo signi ica i amen e dis in os de ce o, conside ados de o ma simul ánea, con una p obabilidad muy al a. Con espec o a la bondad del ajus e, el coe icien e de de e minación (R2 = 0,354277) ecoge que la capacidad explica i a de la a iable explica i a D es del 35,4277%. Po su pa e, el R2 ajus ado es igual a 0,348460. En de ini i a, se comp ueba cómo el es imado del ATET (a 4 ATET ) a oma un alo posi i o, e idenciando un e ec o causal a o able del p og ama de o mación sob e el iempo necesa io pa a encon a un empleo po pa e de los indi iduos pa icipan es en el p og ama e aluado. En é minos medios, la capacidad de inse ción labo al de los indi iduos pa icipan es se e inc emen ada en 0’407455, que supone una educ- ción de 446 días en el iempo de búsqueda de empleo. 03-CANSINO.indd 68 10/5/11 11:58:39 E aluación del impac o de un p og ama de o mación sob e el iempo de búsqueda de un empleo 69 5.3. Los es imado es de empa ejamien o Finalmen e, es posible ob ene el es imado del ATET median e los es imado es de empa ejamien o 25, cuyo obje i o es es ablece las condiciones de un expe imen o alea o io. Con los es imado es de empa ejamien o, se busca la simili ud en e los indi i- duos pa icipan es y de con ol asignando a cada indi iduo del g upo de pa icipan es o del g upo de con ol, un indi iduo 26 del o o g upo que p esen e las mismas, o simi- la es, ca ac e ís icas espec o al ec o de co a iables X. Como a gumen an Dehejia y Wahba (2002, p. 1), es e mé odo pe mi e hace pa es de indi iduos pa icipan es y de con ol que sean simila es en elación a sus ca ac e ís icas obse ables. La hipó esis básica es que el sesgo de selección 27 se elimina si se condiciona sob e las co a iables obse ables (Heckman e al., 1998). Cuando odas las di e encias ele an es en e los dos miemb os del pa quedan ecogidas po las co a iables obse ables, es e mé odo pod á p opo ciona un es imado insesgado de los e ec os del p og ama. Así, pa a un indi iduo i pa icipan e (con un alo es imado de su p obabilidad condicional de pa icipación e4(X i ) a , se busca un indi iduo m de con ol (con un alo es imado de su p obabilidad condicional de pa icipación e4(X m ) a al que e4(X i )%e4(X m ), a o al menos, e4(X i )]e4(X m ). a A es e indi iduo m lo deno a emos como m(i). Realizado es e p ocedimien o pa a cada uno de los indi iduos pa icipan es, pode- mos ob ene el es imado de empa ejamien o del ATET, que suele se el más u ilizado cuando se aplica el mé odo de empa ejamien o, a pa i de la siguien e exp esión: a 4 ATET EMPAREJAMIENTO %1 n 1 n 1 ; i%1 (Y i .Y m(i) ) (11) a donde Yi es el alo que oma la a iable espues a Y pa a el indi iduo pa icipan e i, Ym(i) es el alo de la a iable espues a Y pa a el indi iduo de con ol m(i) que le ha sido asignado como pa y n1 es el núme o de indi iduos pa icipan es. Pa a lle a a cabo es e p oceso de empa ejamien o, se ha aplicado la écnica del alo más p óximo que minimiza la dis ancia en e la p obabilidad condicional de pa icipación de cada pa icipan e con la de los indi iduos del g upo de con ol. Es a 25 El cálculo de los es imado es de empa ejamien o sigue las apo aciones de Hahn (1998) e Hi a- no, Imbens y Ridde (2003). Remi imos ambién a Heckman, Ichimu a y Todd (1997), Abadie e Imbens (2006) y Ca d e al. (2009). 26 Exis en o os es imado es de empa ejamien o más complejos que asigna án a cada indi iduo no un solo indi iduo simila , sino un conjun o de ellos, omando pa a la compa ación el alo medio de sus e- sul ados ob enidos. Una exposición de allada puede segui se en Came on y T i edi (2005, pp. 871 y ss.). 27 El sesgo de selección se de i a de las di e encias en e los indi iduos del g upo de a amien o y del g upo de con ol y puede clasi ica se en es ipos: el de i ado de compa a indi iduos di e en es en ca ac e ís icas obse ables, el de i ado de una di e en e dis ibución de las ca ac e ís icas obse ables en ambos g upos y el de i ado de ca ac e ís icas no obse ables (Ma o y Cue o, 2008). 03-CANSINO.indd 69 10/5/11 11:58:40 70 Cansino, J. M. y Sánchez, A. écnica suele se la más u ilizada en p ocesos de e aluación. No obs an e, de o ma adicional, se ha aplicado ambién el empa ejamien o siguiendo el mé odo de ponde- ación de Ke nel, lo que pe mi e con as a los esul ados. Conside ando la in o ma- ción de la BASEVAFOR, los esul ados apa ecen ecogidos en la abla 10. El es imado del ATET (a 4 ATET ) a oma un alo posi i o, e idenciando un e ec o causal a o able del p og ama sob e los pa icipan es, indicando que és os en inc e- men ada su capacidad de inse ción labo al, en é minos medios, en 0,426581, lo que supone una educción de 467 en el iempo de búsqueda de empleo. Tabla 10. Cálculo del es imado a 4 ATET a median e el empa ejamien o a pa i de la p obabilidad condicional de pa icipación Coe icien e Valo del coe icien e E o es ánda -es adís ico P obabilidad Mé odo del Valo más p óximo a 4 ATET a 0,426581 0,070 6,094014 0,0000 Mé odo de Ke nel a 4 ATET a 0,427101 0,055 7,765472 0,0000 Fuen e: Elabo ación p opia. 6. Conclusiones Con la cau ela que exige llega a conclusiones a pa i de in es igaciones sopo a- das en mues as de amaño educido, los esul ados de es e abajo pe mi en conclui que el P og ama de Escuelas Talle y Casas de O icios e aluado iene un impac o posi i o signi ica i o en la inse ción labo al de los indi iduos pa icipan es. Se han desa ollado es mé odos pa a la ob ención de es imado es del e ec o p omedio del p og ama a pa i de da os obse acionales. La aplicación de es os mé odos sob e la mues a diseñada a pa i de la base de da os cons uida pa a es a in es igación, nos pe mi e compa a los esul ados ob enidos median e los dis in os mé odos y con ex- ualiza los con abajos simila es ealizados en o os países. El e ec o p omedio del P og ama es imado median e la ponde ación de las obse - aciones po la in e sa de la p obabilidad condicional de pa icipación nos pe mi e conclui que el iempo necesa io pa a encon a un empleo de los indi iduos pa ici- pan es se educe en 471 días. Se p esen an ambién los esul ados ob enidos median e el es imado bie ápico de Heckman, que pe mi e ob ene un es imado del e ec o p omedio sob e los pa - icipan es. En es e caso, de acue do con es e es imado , el pe iodo necesa io pa a encon a un empleo de los indi iduos pa icipan es se educe en 446 días. Finalmen e, el uso del es imado de empa ejamien o pe mi e conclui que el e ec o p omedio de es e P og ama se aduce en la educción en 467 días del pe iodo 03-CANSINO.indd 70 10/5/11 11:58:40 E aluación del impac o de un p og ama de o mación sob e el iempo de búsqueda de un empleo 71 de iempo necesa io pa a encon a un empleo de los indi iduos po pa e de los in- di iduos pa icipan es. Dado que el P og ama se diseñó pa a p omo e el empleo en e los jó enes de- sempleados, es e esul ado espalda la e icacia del mismo. Como podemos comp oba , los es ipos de es imado es ob enidos indican e- sul ados simila es: una signi ica i a educción del iempo necesa io pa a encon a empleo po pa e de los indi iduos pa icipan es. No obs an e, las limi aciones que a añen a la BASEVAFOR, aconsejan alo a p uden emen e es os esul ados, que esul an más bené olos que los encon ados po A ellano (2005) y Ma o y Cue o (2008), en sus in es igaciones. Pos e io es in es i- gaciones pe mi i ían obus ece es as conclusiones en el caso de que las Adminis a- ciones Públicas implicadas pe mi iesen amplia el sopo e empí ico con da os sob e ca ac e ís icas indi iduales adicionales cuyo e ec o no ha podido analiza se en es a in es igación, ya que los da os indi iduales, que pe mi en la de inición de las a- iables p ede e minadas o co a iables, p opo cionadas has a el momen o, son limi- ados. Los esul ados ob enidos son cohe en es con los apo ados po o os abajos de e aluación, como son los de Ca d y Sulli an (1988) en Es ados Unidos y de Blundell e al. (2004) en el Reino Unido. En ambos a ículos se concluye, a pa i de dis in os es imado es, la exis encia de e ec os posi i os no o ios de los p og amas de o ma- ción e aluados sob e la p obabilidad o capacidad de encon a un empleo de los in- di iduos pa icipan es. En la misma di ección se si úa el abajo de Pa k e al. (1996) pa a Canadá, que es ima un e ec o posi i o de los p og amas some idos a e aluación, aunque en es e caso se es ima el e ec o p omedio sob e el ni el de ing esos de los indi iduos, oman- do és e como a iable espues a. Cansino y Román (2007) han expues o la di icul ad de emplea es a a iable pa a la e aluación de p og amas de o mación en España. Re e encias bibliog á icas Abadie, A., e Imbens, G. W. (2006): «La ge Sample P ope ies o Ma ching Es ima o s o A e age T ea men E ec s», Econome ica, 74 (1): 235-267. And ews, M.; B adley, S., y Upwa d, R. (1999): «Es ima ing You h T aining Wage Di e en- ials Du ing and A e T aining», Ox o d Economic Pape s, ol. 51(3): 517-544. A ellano, A. (2005): «Do T aining P og ammes Ge he Unemployed Back o Wo k?: A Look a he Spanish Expe ience», Wo king Pape 05-25, Economic Se ies 05, ab il, Uni e sidad Ca los III de Mad id. A ellano, F. A. (2009): «Do aining p og ammes ge he unemployed back o wo k? A look a he Spanish expe ience», Re is a de Economía Aplicada, en p ensa. Ashen el e , O. C. (1978): «Es ima ing he E ec o T aining P og ams on Ea nings», Re iew o Economics and S a is ics, 60(1): 47-57. Ba now, B.; Cain, G., y Goldbe ge , A. (1980): «Selec ion on Obse ables», en S omsdo e , E. W., y Fa kas, G. (eds.), E alua ion S udies Re iew Annual, ol. 5: 43-59, Be e ly Hills, Cali o nia, Sage Publica ions. 03-CANSINO.indd 71 10/5/11 11:58:41 72 Cansino, J. M. y Sánchez, A. Bassi, L. J. (1984): «Es ima ing he E ec o T aining P og ams wi h Non-Random Selec ion», Re iew o Economics and S a is ics, 66 (1): 36-43. Bell, S. H.; O , L. L., y Blomquis , J. D. (1995): P og am applican s as a compa ison g oup in e alua ing aining p og ams. W. E. Upiohn Ins i u e o Employmen Resea ch, Ka- lamazoo, MI. Be gemann, A.; Fi zenbe ge , B., y Speckesse , S. (2005): «E alua ing he Dynamic Employ- men E ec s o T aining P og ams in Eas Ge many Using Condi ional Di e ence-in-Di - e ences», Documen o de abajo núm. 1.848 del «Ins i u e o he S udy o Labo (IZA)», no iemb e 2005. Blundell, R.; Cos a, M.; Meghi , C., y Van Reenen, J. (2004): «E alua ing he Employmen Impac o a Manda o y Job Sea ch P og am», Jou nal o he Eu opean Economic Associa- ion, 2 (4): 569-606. Bonnall, L.; Fougè e, D., y Sé andon, A. (1997): «E alua ing he Impac o F ench Employe- men Policies on Indi idual Labou Ma ke His o ies», Re iew o Economic S udies, 64 (4): 683-713. Bu less, G. (1995): «The Case o Randomized Field T ials in Economic and Policy Resea ch», Jou nal o Economic Pe spec i es, 9 (2): 63-84. Came on, E., y Pauling, L. (1976): «Supplemen al Asco ba e in he Suppo i e T ea men o Cance : P olonga ion o Su i al Times in Te minal Human Cance », P oceedings o he Na ional Academy o Sciences o he Uni ed S a es o Ame ica, 73 (10): 3685- 3689. Came on, A. C., y T i edi, P. K. (2005): Mic oeconome ic. Me hods and Applica ions, New Yo k, Camb idge Uni e si y P ess. Cansino, J. M., y Román, R. (2007): «E aluación de polí icas públicas sob e poblaciones he- e ogéneas ¿pueden los ó ganos de con ol ex e no con ibui a su a ance?», Re is a Espa- ñola de Con ol Ex e no, 9 (25), 107-129. Cansino, J. M., y Sánchez, A. (2008): «A e age e ec o aining p og ams on he ime needed o ind a job. The case o he aining p og ams schools in he sou h o Spain (Se ille, 1997-1999)», Documen os de T abajo de Funcas ( e sión disponible en www. uncas.es). — (2009): «E aluación del p og ama de Escuelas Talle y Casas de O icios a pa i de su e ec o sob e el iempo de búsqueda del p ime empleo. El caso de Se illa», Es udios de Economía Aplicada, 29 (1), 273-296. Ca d, D., y Sulli an, D. (1988): «Measu ing he E ec s o Subsidized T aining P og ams on Mo emen s In and Ou o Employmen », Econome ica, 56 (3): 497-530. Ca d, D.; Klu e, J., y Webe , A. (2009): «Ac i e Labo Ma ke Policy E alua ions - A Me a Analysis», Ruh Economics Pape s, 86. Coch an, W. G. (1968): «The E ec i eness o Adjus men by Subclassi ica ion in Remo ing Bias in Obse a ional S udies», Biome ics, 24 (2): 295-313. Consejo Económico y Social (1995): España... economía, abajo y sociedad: memo ia sob e la si uación socioeconómica y labo al, Mad id, Consejo Económico y Social. Dehejia, R. H., y Wahba, S. (1999): «Causal E ec s in Non-Expe imen al S udies: Ree alua - ing he E alua ion o T aining P og ams», Jou nal o he Ame ican S a is ical Associa ion, 94 (448): 1053-1062. — (2002): «P opensi y Sco e Ma ching Me hods o Non-expe imen al Causal S udies», Re- iew o Economics and S a is ics, 84 (1): 151-161. F iedlande , D.; G eenbe g, D. H., y Robins, P. K. (1997): «E alua ing Go e nmen T aining P og ams o he Economically Disad an aged», Jou nal o Economic Li e a u e, ol. 35 (4): 1809-1855. Hahn, J. (1998): «On he Role o he P opensi y Sco e in E icien Semipa ame ic Es ima ion o A e age T ea men E ec s», Econome ica, 66 (2): 315-331. 03-CANSINO.indd 72 10/5/11 11:58:41 E aluación del impac o de un p og ama de o mación sob e el iempo de búsqueda de un empleo 73 Heckman, J. J. (1979): «Sample Selec ion Bias as a Speci ica ion E o », Economé ica, 47 (1): 153-162. Heckman, J.; Clemen s, N., y Smi h, J. (1997): «Making he Mos ou o P og amme E alua- ions and Social Expe imen s: Accoun ing o He e ogenei y in P og amme Impac s», Re- iew o Economic S udies, 64 (4): 487-535. Heckman, J. J., y Ho z, V. J. (1989): «Choosoing Among Al e na i e Nonexpe imen al Me- hods o Es ima ing he Impac o Social P og ams: The Case o Manpowe T aining», Jou nal o he Ame ican S a is ical Associa ion, 84 (408): 862-874. Heckman, J. J.; Ichimu a, H.; Smi h, J., y Todd, P. E. (1998): «Cha ac e izing Selec ion Bias Using Expe imen al Da a», Econome ica, 66 (5): 1017-1098. Heckman, J. J.; Ichimu a, H., y Todd, P. E. (1997): «Ma ching As an Econome ic E alua ion Es ima o : E idence om E alua ing a Job T aining P og amme», Re iew o Economics S udies, 64 (4): 605-654. Heckman, J. J.; Lalonde, R. J., y Smi h, J. A. (1999): «The Economics and Econome ics o Ac- i e Labou Ma ke P og amms», en Ashen el e , O., y Ca d, D. (eds.), Handbook o Labo Economics, ol. III, Else ie Science B. V. Heckman, J.; Smi h, S., y Tabe , C. (1998): «Accoun ing o D opou s in E alua ions o Social P og ams», Re iew o Economics and S a is ics, 80(1): 1-14. Heckman, J. J., y Vy lacil, E. (2005): «S uc u al Equa ions, T ea men E ec s, and Econome- ic Policy E alua ion», Econome ica, 73 (3): 669-738. Hi ano, K.; Imbens, G., y Ridde , G. (2003): «E icien Es ima ion o A e age T ea men E - ec s Using he Es ima ed P opensi y Sco e», Econome ica, 71(4): 1161-1189. Holland, P. W. (1986): «S a is ics and Causal In e ence» (con comen a ios), Jou nal o he Ame ican S a is ical Associa ion, 81 (396): 945-970. Imbens, G. W. (2004): «Nonpa ame ic Es ima ion o A e age T ea men E ec s Unde Exoge- nei y: A Re iew», Re iew o Economics and S a is ics, 86 (1): 4-29. Kie e , N. (1979): «Economic Bene i s om Fou Manpowe T aining P og ams», Ga land Se ies o Ou s anding Disse a ions in Economics, New Yo k, Ga land P ess. Lalonde, R. J. (1986): «E alua ing he Econome ic E alua ion o T aining P og ams wi h Expe imen al Da a», Ame ican Economic Re iew, 76 (4): 604-620. Manski, C., y Ga inkel, I. (1992): E alua ing Wel a e and T aining P og ams, Camb idge, Massachuse s, Ha a d Uni e si y P ess. Manski, C. F. (2001): «Designing p og ams o he e ogeneous popula ions: The alue o co- a ia e in o ma ion», Ame ican Economic Re iew, 91 (2): 103-106. Ma o, F. J. (2002): La o mación pa a el empleo: una e aluación cuasi-expe imen al, Mad id, Conseje ía de T abajo y P omoción de Empleo del P incipado de As u ias y Ci i as Eds. Ma o, F. J., y Cue o, B. (2008): «E ec os de las Polí icas de Fo mación a Desempleados», Re- is a de Economía Aplicada, 46 (16): 61-83. — (2009): «A nonexpe imen al e alua ion o aining p og ammes: egional e idence o Spain», Annals o Regional Science, 43 (2): 415-433. Pa k, N.; Powe , B.; Riddell, W. C., y Wong, G. (1996): «An assessmen o he Impac o Go e nmen -Sponso ed T aining», Canadian Jou nal o Economics, 29 (Special Issue: Pa I): S93-S98. Pea l, J. (2000): Causali y: Models, Reasoning and In e ence, Camb idge, Camb idge Uni e - si y P ess. Raaum, O., y To p, H. (2002): «Labou ma ke aining in No way-e ec on ea nings», Labou Economics, 9 (2): 207-247. Regné , H. (2002): «A Nonexpe imen al E alua ion o T aining P og ams o he Unemployed in Sweden», Labou Economics, 9 (2): 187-206. Rosenbaum, P. R. (1995): Obse a ional S udies, Sp inge Se ies in S a is ics, New Yo k, Sp inge -Ve lag. 03-CANSINO.indd 73 10/5/11 11:58:41 74 Cansino, J. M. y Sánchez, A. — (1999): «Choice As an Al e na i e o Con ol in Obse a ional S udies» (con comen a ios), S a is ical Science, 14 (3): 259-304. Rosenbaum, P. R., y Rubin, D. B. (1983): «The Cen al Role o he P opensi y Sco e in Obse - a ional S udies o Causal E ec s», Biome ica, 70 (1): 41-55. Roy, A. (1951): «Some Though s on he Dis ibu ion o Ea nings», Ox o d Economic Pape s, 3 (2): 135-146. Rubin, D. B. (1974): «Es ima ing Causal E ec s o T ea men s in Randomized and Non- an- domized S udies», Jou nal o Educa ional Psychology, 66 (5): 688-701. 03-CANSINO.indd 74 10/5/11 11:58:41