Studie zeigt, dass das Research Excellence Framework die Leistung britischer Universitäten erheblich steigert, nicht aber die Effizienz

Eine neue Studie unter der Leitung von City, University of London, legt nahe, dass die Einführung des Research Excellence Framework (REF) zur Messung der Forschungsleistung britischer Universitäten zu einer erheblichen Steigerung der Quantität ihrer qualitativ hochwertigen veröffentlichten Forschung geführt hat, nicht jedoch der die Leistung aktiver Akademiker zu verbessern und dass sie mehr tun muss, um universitäre Forschungsstrategien zu unterstützen.

Viele Länder auf der ganzen Welt nutzen leistungsbasierte Forschungssysteme (PRFS), um die Verteilung der Forschungsmittel auf Hochschuleinrichtungen zu bestimmen. Im Jahr 2008 ersetzte der REF Research Assessment Exercises (RAE) als Maßeinheit hierfür an britischen Universitäten, wobei die ersten Ergebnisse im Jahr 2014 den Zeitraum zwischen 2009 und 2014 abdeckten.

Die Forschung von Giulia Iori und Albert Banal-Estañol, Professoren für Wirtschaftswissenschaften an der City, untersuchte zusammen mit Wissenschaftlern der Universitat de Barcelona, ​​der London School of Economics and Political Science und der Universität Palermo die Leistung von Institutionen und die inkrementellen Auswirkungen von REF2014 auf die Produktion und Qualität der von britischen Universitäten eingereichten Forschungsergebnisse im Gegensatz zu vergleichbaren Institutionen in den Vereinigten Staaten, die einer solchen Messung nicht ausgesetzt sind.

Die Stichprobe umfasste 103 britische Universitäten, die Forschungsergebnisse beim REF2014-Panel „Wirtschaft und Ökonometrie“ oder „Business und Management“ eingereicht hatten. Als Kontrollgruppe dienten 135 US-Universitäten mit einem Department of Economics oder Business School im obersten Quartil gemäß der Research Papers in Economics (RePEc)-Datenbank vom Dezember 2018.

Zu den wichtigsten Erkenntnissen der Forschung gehören:

  • REF2014 steigerte die Forschungsleistung britischer Universitäten im Vergleich zu US-amerikanischen Institutionen deutlich, die Zahl der Veröffentlichungen pro Autor wuchs damit jedoch nicht. Dies deutet darauf hin, dass das REF die Universitäten im Allgemeinen dazu ermutigte, mehr Akademiker einzustellen, um ihre Aktivität zu steigern, anstatt ihre vorhandenen Forscher dabei zu unterstützen, ein höheres Arbeitsvolumen zu produzieren.
  • Anschließend stieg die Zahl der britischen Universitätspublikationen im Laufe des Zeitraums im Durchschnitt pro Fachbereich um 41,37 Prozent, wobei die stärkste Veränderung gegen Ende des Zyklus, zwischen 2012 und 2014, stattfand.
  • Auch die Forschungsexzellenz – gemessen an Veröffentlichungen in Top-Zeitschriften (Zeitschriften mit 3*, 4* und 4**, gemessen an der Klassifizierung wissenschaftlicher Zeitschriften der Association of Business Schools) – stieg im Vergleich zu anderen Ländern nach der Einführung von REF.
  • Die Steigerungen der Forschungsleistung für REF2014 waren bei Universitäten der Russell Group im Allgemeinen stärker ausgeprägt als bei Universitäten, die nicht zur Russell Group gehören, wobei REF2014 einen stärkeren positiven Einfluss in Bezug auf die Anzahl der Top-Veröffentlichungen pro Autor hatte.
  • Die Zahl der Einreichungen von Universitäten, die sich für das RAE2008-Panel „Ökonomie und Ökonometrie“ entschieden, für REF2014 jedoch zum Business- und Management-Panel wechselten, war im Vergleich zu denen, die beim gleichen Panel blieben, deutlich zurückgegangen. Folglich erhöhte sich ihr Anteil an Wirtschaftspublikationen in Top-Zeitschriften nicht.
  • Forscher nutzten Scopus, die weltweit größte Datenbank für begutachtete Literatur, um alle Artikel zu erhalten, die mindestens eine der 103 britischen Universitäten oder 135 US-Universitäten als Zugehörigkeit aufwiesen und entweder „Wirtschaftswissenschaften, Ökonometrie und Finanzen“ oder „Unternehmensführung“ enthielten „Rechnungslegung“ als Themenbereiche und wurden zwischen 2001 und 2014 veröffentlicht. Institutionen, die zwischen 2001 und 2008 durchschnittlich weniger als zehn Arbeiten pro Jahr einreichten, wurden aus der Gesamtstichprobengröße ausgeschlossen, die insgesamt 145.536 einzelne Veröffentlichungen umfasste.

    Professor Iori sagte, die Studie lege nahe, dass REF mehr tun müsse, um Universitäten zu ermutigen, in Prozesse und unterstützende Strategien zu investieren.

    „Das Research Excellence Framework ist ein wichtiges Instrument für Universitäten, um Gelder anzuziehen, Studierende zu rekrutieren und ihr nationales und globales Ansehen zu steigern“, sagte sie.

    „Im Vergleich zu US-Universitäten zeigen unsere Daten, dass das REF zu einer höheren Anzahl von Forschungspublikationen und Artikeln in den besten Fachzeitschriften führt. Angesichts der Tatsache, dass die Anzahl der Veröffentlichungen pro Autor während des gesamten Forschungszeitraums stabil blieb, scheint dies jedoch darauf zurückzuführen zu sein.“ Institutionen stellen mehr Akademiker ein und sind nicht ein intrinsischer Motivator für Akademiker selbst, in führenden Fachzeitschriften zu veröffentlichen. Bei dieser Rekrutierung handelt es sich lediglich um eine Umverteilung von Akademikern und nicht um eine Verbesserung der Forschungskapazität.“

    „Letztendlich kommt dies den Eliteuniversitäten zugute, die die besten Akademiker anziehen können, und schadet den schwächeren Universitäten, die sie an die Konkurrenz verlieren, trägt aber wenig dazu bei, die Gesamtstandards zu verbessern.“

    Professor Banal-Estañol stimmte zu, dass in der Studie Verbesserungsbedarf im Bewertungsrahmen aufgezeigt wurde.

    „Die REF muss eine stärkere Zusammenarbeit zwischen inländischen Wettbewerbern fördern, anstatt sie gegeneinander auszuspielen“, sagte er.

    „Der Vergleich von Universitäten im Inland ist nicht sehr aussagekräftig, da die besten immer die schlechtesten übertreffen, insbesondere angesichts der Polarisierung der akademischen Umverteilung. Wenn eine zu große Lücke besteht, kann dies schwächere Institutionen davon abhalten, Forschungsergebnisse zu produzieren und einzureichen, was sich insgesamt nachteilig auswirkt.“ .“

    „Stattdessen muss das REF Universitäten belohnen, die andere auf einem ähnlichen Weg übertreffen, anstatt die Starken gegen die Schwachen antreten zu lassen, weshalb internationale Vergleiche viel nützlicher sind, um Gesamtstandards voranzutreiben.“

    „Diese Studie liefert die Grundlage für alternative Erfolgsmaßstäbe eines leistungsbasierten Forschungssystems, um die gerechteste Mittelverteilung zu gewährleisten und gleichzeitig den Wettbewerb aufrechtzuerhalten und die Gesamtstandards zu erhöhen.“

    Mehr Informationen:
    Albert Banal-Estañol et al, Leistungsbasierte Forschungsförderung: Beweise aus dem größten Naturexperiment weltweit, Forschungspolitik (2023). DOI: 10.1016/j.respol.2023.104780

    Zur Verfügung gestellt von der City University London

    ph-tech