CoARA WG Co-Chairs Forum 2025 in Graz: Perspectives on the Research Assessment Reform in Austria

PERSPECTIVES ON THE RESEARCH ASSESSMENT REFORM IN AUSTRIA CoARA 2nd Co-Chairs Forum 13.11.2025 Assoc. Prof. Toma Susi Faculty of Physics, University of Vienna CoARA members (17 May 2025) ORGANISATION TYPE ALL COUNTRIES OUTSIDE EUROPE EUROPE Universities and their associations 460 63 % 16*33 % 444*65 % Research centres, research infrastructures, and their associations 99 14 % 510 % 94 14 % Academies, learned societies, and their associations, and associations of researchers 58 8 % 12 25 % 46 7 % Public or private research funding organisations and their associations 53 7 % 36 % 50 7 % Other relevant non-for-profit organisations and their associations 41 6 % 10 21 % 31 5 % National/regional authorities or agencies and their associations 21 3 % 24 % 19 3 % All organisations 732 100 % 48 100 % 684 100 % *4 universities from Cyprus (2) and Turkey (2), which CoARA website includes in Asia, were moved in this analysis to Europe (as they are included also in ETER) J. Pölönen, Zenodo (2025) https://zenodo.org/records/15727196 CoARA membership per country As of October 17th, 2025 1111111111111 2222222222222 3333 555 8 9 10 12 13 1414 1515 1616 17 20 26 2929 32 33 34 38 47 54 55 72 85 Ethiopia Bosnia and Herzegovina Bulgaria Canada Croatia Kenya Nigeria Panama Serbia Tanzania Timor-Leste Zimbabwe Uganda India Kosovo Greece Cyprus Australia Brazil Costa Rica Andorra Estonia Iceland Mexico North Macedonia Tunisia Peru Slovakia Chile Luxembourg Turkiye Latvia Moldova Georgia Slovenia Denmark Czechia Belgium Ireland Ukraine Lithuania Hungary Switzerland Norway Austria Global Netherlands United Kingdom Portugal Romania Finland Sweden Germany Europe France Poland Italy Spain Number of members *excl. pan-European and global organisations Membership total: 779 # of countries*: 58 (17 October 2025) Percentage of member HEIs per country 5 0 % 20 % 40 % 60 % 80 % 100 % Albania (N=41) Andorra (N=1) Austria (N=74) Belgium (N=63) Bulgaria (N=52) Croatia (N=38) Cyprus (N=28) Czechia (N=56) Denmark (N=40) Estonia (N=18) Finland (N=38) France (N=515) Germany (N=399) Greece (N=45) Hungary (N=50) Iceland (N=7) Ireland (N=18) Italy (N=209) Kosovo (N=23) Latvia (N=40) Liechtenstein (N=2) Lithuania (N=35) Luxembourg (N=2) Malta (N=11) Montenegro (N=5) Netherlands (N=57) Norway (N=34) Poland (N=265) Portugal (N=94) Romania (N=91) Serbia (N=40) Slovakia (N=31) Slovenia (N=46) Spain (N=89) Sweden (N=38) Switzerland (N=38) Turkey (N=208) UK (N=246) All HEIs (N=3087) CoARA member Not CoARA member Share of CoARA members: European HEIs •Largest share of HEIs: Finland, Sweden, Ireland, Spain and Norway •No CoARA members: Albania, Estonia, Greece, Malta, Serbia J. Pölönen, Zenodo (2025) https://zenodo.org/records/15727196 Swiss Universities Université de Fribourg *University of Zurich Zurich University of Applied Sciences Bern University of Applied Sciences BFH University of Applied Sciences and Arts of Western Switzerland ETH Zurich *University of Geneva *University of Lausanne Zurich University of Teacher Education Schwyz University of Teacher Education *University of Teacher Education, State of Vaud EPFL –Swiss Federal Institute of Technology in Lausanne University of Applied Sciences and Arts Northwestern Switzerland Zurich University of the Arts Switzerland: enthusiastic embrace 6 Swiss Universities Université de Fribourg *University of Zurich (THE #80) Zurich University of Applied Sciences Bern University of Applied Sciences BFH University of Applied Sciences and Arts of Western Switzerland ETH Zurich (THE #11) *University of Geneva *University of Lausanne Zurich University of Teacher Education Schwyz University of Teacher Education *University of Teacher Education, State of Vaud EPFL – Swiss Federal Institute of Technology in Lausanne (THE #33) University of Applied Sciences and Arts Northwestern Switzerland Zurich University of the Arts *Signatory of ARRA, not member of CoARA Swiss university signatories and members: The highest—ranked Swiss HEIs amongst early supporters! www.swissinfo.ch ’“The agreement itself … is basically the result of a top-down process,” says [the German] Rectors’ Conference vice president’ •Initial consultation of 130 organisations (research funding and performing orgs, universities, research infrastructures, etc) •Drafting by EUA, Science Europe, and EC, with core group of 20 individual experts (universities, researcher orgs, etc.) •Further ongoing feedback on draft from 350+ organisations from 40 countries ‘He also fears a more relaxed approach of ‘striving for quality’ could endanger the ERC focus on funding excellent research.’ •ERC Scientific Council decided to sign the Agreement (Press release, 19.12.2022) •Excellent institutions such as IST Austria (#1 success rate for ERC grants worldwide) and researcher organizations including Association of ERC Grantees are amongst the earliest signatories! 7 https://sciencebusiness.net/news/german-universities-still-wary-eu-push-reform-research-assessment Germany: prominent opposition… 8 https://www.hrk.de/press/press-releases/press-release/meldung/eu-reform-of-researchassessment-hrk-will-participate-as-a-guest-in-the-german-national-chapter-of/ …starting to thaw? Critique of rankings (uniko) 16 https://uniko.ac.at/themen/rankings/ (machine-translated with DeepL) “Regardless of the importance that individual institutions attach to the various university rankings and the individual conclusions that are drawn from the results, it can generally be said that university rankings provide a limited and sometimes distorted picture of the performance of Austrian universities and their staff. Nevertheless, they are taken into account by stakeholders and promote international visibility. Austrian universities do not consider rankings to be a suitable internal management or performance evaluation tool and explicitly do not base their university tasks and strategies on the results of individual rankings. Austrian universities do not consider rankings to be a suitable internal management or performance evaluation tool and explicitly do not base their university tasks and strategies on the results of individual rankings.” National strategy includes rankings 18 https://era.gv.at/public/documents/4489/RTI_Strategy_2030-1-1.pdf RTI Strategy 2030 Strategy for Research, Technology and Innovation of the Austrian Federal Government “governments love the simplicity of rankings” – E. Gadd, Nature 647, 317-319 (2025) Captured by ranking success? 19 https://www.univie.ac.at/en/about-us/university-rankings Absurdity of rankings 20 Ranking position 2022: 200+ 2023: 48 Perpetuating a dysfunctional system 21 [Email on 27.10.2025 from the Rectorate of Uni Wien] “University rankings hold importance for our international visibility. Based on the results of recent years, the University of Vienna shows a very positive development, and we are proud that—thanks in part to stronger reputation scores—we have made it into the top 100 for the first time this year. A strong performance in rankings is crucial for our strategic partnerships, as well as for successful recruiting. International leading scholars consider ranking positions when contemplating an appointment in Vienna, just as international students who are considering pursuing studies in one of our international master's programs or at a doctoral school. We are aware, that the budget is the most important lever to improve our rankings, which is why the university's leadership discusses this at the political level. Furthermore, as a university, we can also influence rankings through our reputation. For instance, in the case of THE World University Ranking, which is very important to us due to its international visibility, as well as the subject rankings published by THE, a university's reputation is of great significance. Uni Wien Performance Agreements 22 2022–2024: https://mtbl.univie.ac.at/storage/media/mtbl02/2021_2022/2021_2022_28.pdf 2025–2027: https://mtbl.univie.ac.at/storage/media/mtbl02/2024_2025/2024_2025_37.pdf Leistungsvereinbarung 2022-2024 Seite 35 Nr. Ziel(e) (inkl. Referenz Strategiedokument) Indikator Ausgangswert 2020 Zielwert 2022 2023 2024 4 Drittmitteleinwerbungen (Grundlagenforschung) erhöhen (siehe EP Kapitel 2.1 und 3.1, GUEP 2a) Verhältnis der Drittmittelerlöse nach Wissensbilanzkennzahl 1.C.1 im jeweiligen Jahr zum Ausgangswert 2020. Gezählt werden: andere internationale Organisationen, EU, FWF, Jubiläumsfonds der OeNB, ÖAW, Private (Stiftungen, Vereine, etc.), sonstige 100% (69,3 Mio. Euro) 105% 110% 115% 5 Drittmitteleinwerbungen (anwendungsorientierte und angewandte Forschung) erhöhen (siehe EP Kapitel 2.1 und 3.1, GUEP 2a) Verhältnis der Drittmittelerlöse nach Wissensbilanzkennzahl 1.C.1 im jeweiligen Jahr zum Ausgangswert 2020. Gezählt werden: Gebietskörperschaften, CDG, FFG, Unternehmen, anwendungsorientierte EU-Projekte (keine eigene Kategorie gemäß WBV 2016, daher inhaltlich zu beurteilen) 100% (11,3 Mio. Euro) 105% 110% 115% 6 Q1-Publikationen (Top-25%) (soweit im entsprechenden Fach anwendbar) Anzahl von Q1-Journalartikeln (gemäß WoS JCR oder SCOPUS CiteScore) In anderen Fächern (ohne quantitativen Indikator) Publikationen in als erstklassig anerkannten Publikationsorganen und Verlagen WoS: 1365 SCOPUS: 2094 +5% Anzahl der Publikationen im Jahr 2024, basierend auf den endgültigen Zahlen 2020 7 Internationale Sichtbarkeit in der Grundlagenforschung steigern ERC Grants (kumuliert über alle EU-Rahmenprogramme) pro Professor*in und Tenure Track 0,10 (61 ERC-Grants 2007-2020; 634,5 Jahres-VZÄ Professor*innen und Tenure Track 2020) 0,12 (ERC Grants 2007-2023; JahresVZÄ Professor*innen und Tenure Track 2023) 8 Rankingpräsenz Position im THE-Ranking, das im jeweiligen Jahr veröffentlicht wird #137 (im Jahr 2021) Besser als #137 in einem in der LV-Periode gemessenen Jahr (veröffentlicht spätestens 2025, basierend auf Daten 2024) Leistungsvereinbarung 2022-2024 Seite 35 Nr. Ziel(e) (inkl. Referenz Strategiedokument) Indikator Ausgangswert 2020 Zielwert 2022 2023 2024 4 Drittmitteleinwerbungen (Grundlagenforschung) erhöhen (siehe EP Kapitel 2.1 und 3.1, GUEP 2a) Verhältnis der Drittmittelerlöse nach Wissensbilanzkennzahl 1.C.1 im jeweiligen Jahr zum Ausgangswert 2020. Gezählt werden: andere internationale Organisationen, EU, FWF, Jubiläumsfonds der OeNB, ÖAW, Private (Stiftungen, Vereine, etc.), sonstige 100% (69,3 Mio. Euro) 105% 110% 115% 5 Drittmitteleinwerbungen (anwendungsorientierte und angewandte Forschung) erhöhen (siehe EP Kapitel 2.1 und 3.1, GUEP 2a) Verhältnis der Drittmittelerlöse nach Wissensbilanzkennzahl 1.C.1 im jeweiligen Jahr zum Ausgangswert 2020. Gezählt werden: Gebietskörperschaften, CDG, FFG, Unternehmen, anwendungsorientierte EU-Projekte (keine eigene Kategorie gemäß WBV 2016, daher inhaltlich zu beurteilen) 100% (11,3 Mio. Euro) 105% 110% 115% 6 Q1-Publikationen (Top-25%) (soweit im entsprechenden Fach anwendbar) Anzahl von Q1-Journalartikeln (gemäß WoS JCR oder SCOPUS CiteScore) In anderen Fächern (ohne quantitativen Indikator) Publikationen in als erstklassig anerkannten Publikationsorganen und Verlagen WoS: 1365 SCOPUS: 2094 +5% Anzahl der Publikationen im Jahr 2024, basierend auf den endgültigen Zahlen 2020 7 Internationale Sichtbarkeit in der Grundlagenforschung steigern ERC Grants (kumuliert über alle EU-Rahmenprogramme) pro Professor*in und Tenure Track 0,10 (61 ERC-Grants 2007-2020; 634,5 Jahres-VZÄ Professor*innen und Tenure Track 2020) 0,12 (ERC Grants 2007-2023; JahresVZÄ Professor*innen und Tenure Track 2023) 8 Rankingpräsenz Position im THE-Ranking, das im jeweiligen Jahr veröffentlicht wird #137 (im Jahr 2021) Besser als #137 in einem in der LV-Periode gemessenen Jahr (veröffentlicht spätestens 2025, basierend auf Daten 2024) “It is difficult to get a [University] to [change] something when [its budget] depends on not [changing] it.” – paraphrasing Upton Sinclair 2022–2024 Seite 64 von 91 Auf Basis der AHESN Schnittstellen sollen technische und organisatorische Grundlagen für Shared Services geschaffen und weiterentwickelt werden. Neben der Plattform zur Anerkennung von Prüfungsleistungen und einer gemeinsamen Lösung für die UHStat2 Meldung, sollen Daten zu Curricula (Lehrveranstaltungen, Module, etc.) standardisiert und über AHESN Schnittstellen austauschbar gemacht werden. Außerdem wird die Erweiterung der Gruppe auf alle Anbieter von Campus Management Systemen in Österreich angestrebt. 6 Kooperation mit dem WPI Für das Wolfgang Pauli Institut (WPI) werden zur Durchführung von Thematischen Programmen und der Wolfgang Pauli Fellowships mit dem Ziel der internationalen, interdisziplinären und interinstitutionellen Kooperation im MINT Bereich in dieser Leistungsvereinbarungsperiode entsprechende Mittel bereitgestellt. Das WPI entfaltet seine autonomen Aktivitäten nicht nur an der Universität Wien, sondern auch für andere Universitäten in Wien, insbesondere die TU Wien, die Medizinische Universität Wien, und ganz Österreich und wird dem BMBWF direkt entsprechende Berichte und Abrechnungen zu seinen Aktivitäten bereitstellen. 2025-2027: Fortführung der Kooperation 7 Verbesserung der THE-WU-RankingPlatzierung (Umsetzung der FTIStrategie 2030) Um die Zielsetzung der FTI-Strategie zu erreichen, unter die Top 100 des Times Higher Education World University Rankings (THE-WUR) zu kommen, beteiligt sich die Universität Wien aktiv an der THE-Ranking-Initiative des BMBWF. Insbesondere werden folgende Schritte gesetzt: 1. Analyse der Roadmap-Empfehlungen, um kurz-, mittelund langfristige Maßnahmen zu entwickeln, die die qualitative Entwicklung der Universität fördern und die Platzierung im THE-WUR verbessern sollen. 2. Schaffung der Dachmarke "Austrian Universities" (Arbeitstitel), um die internationale Sichtbarkeit zu stärken. 3. Beteiligung am Datenqualitätsmanagement in einer interuniversitären Arbeitsgruppe mit dem BMBWF 2025: Einrichtung der Arbeitsgruppen Teilnahme an PlattformKick-off, Übermittlung des Maßnahmenkatalogs 2026: Regelmäßige Arbeitsgruppentreffen, Teilnahme an Plattform-Veranstaltungen zur Stärkung der gemeinsamen Dachmarke 2027: Fortführung und Evaluierung der Maßnahmen D1.3. Ziel(e) zu Kooperationen Nr. Ziel(e) (inkl. Referenz Strategiedokument) Indikator A usgangswert 2023 Zielwert 2025 2026 2027 1 Interuniversitäre Clusterprojekte mit der MedUni Wien “AI meets Medicine” (EP 2031, Kapitel 6) Anzahl der laufenden, gemeinsam eingerichteten Clusterprojekte pro Jahr (Es sollen weniger Projekte, dafür aber höher dotiert als in den vorherigen Ausschreibungen, eingerichtet werden) 4 2-3 2-3 2-3 2025–2027 CoARA National Chapters 24 National Chapters in 2025National Chapters in 2023 Austria in 2026?