Die wunderbare Welt der Forschungs(d)evaluation
Je mehr Artikel ein Wissenschaftler in hoch gerankten Journals veröffentlicht, desto besser ist die wissenschaftliche Qualität seiner Arbeit? Ein empirischer Blick auf ein folgenreiches Paradigma im Gastbeitrag von Asvin Goel.

Asvin Goel ist Professor für Logistik an der Kühne Logistics University (KLU) in Hamburg. Foto: privat.
IN ZEITEN, in denen sich das Wissen der Welt rasant vermehrt, wird es immer schwerer, Forschungsergebnisse aus anderen Fachgebieten zu verstehen, geschweige denn zu bewerten. Gleichzeitig müssen viele wissenschaftliche Institutionen zunehmend Rechenschaft über die Mittelverwendung geben. Wie also sollen Institutionen darlegen, dass sie die zur Verfügung gestellten Gelder sinnvoll einsetzen?
Naheliegend ist der Einsatz von Kennzahlen. Kennzahlen bieten eine verlockende Einfachheit in einer ansonsten komplexen und oft undurchsichtigen wissenschaftlichen Landschaft. Sie reduzieren die Vielfalt und Tiefe wissenschaftlicher Arbeit auf eine handhabbare Größe, die sich leicht vergleichen und in Berichten präsentieren lässt. Ob es die Anzahl der Zitationen einer Arbeit ist, das Ranking der Zeitschriften, in denen publiziert wurde, oder die Höhe der eingeworbenen Drittmittel, jede dieser Zahlen scheint eine klare, objektive Aussage über die Qualität der Forschung zu treffen.
Doch Zitationen kommen oft erst spät und sind daher für eine zeitnahe Evaluation ungeeignet. Sie spiegeln den langfristigen Einfluss ...
Sie sehen die gekürzte Fassung dieses Artikels
Der volle Zugang zu Artikeln, die älter sind als vier Wochen, ist nur für registrierte Unterstützer des Wiarda-Blogs vorgesehen.
Kommentare
#1 - Gut, dass dieses Thema hier im Blog mal wieder zur Sprache…
#2 - Sind die Ergebnisse hinsichtlich der Risikobereitschaft bei…
#3 - Danke für diesen Beitrag!Dessen Ergebnisse decken sich mit…
Dessen Ergebnisse decken sich mit denen einer ähnlichen Studie, die vor etwa einer Dekade ein Team von Forschenden am damaligen iFQ (jetzt eine Abteilung des DZHW) für die Medizin erstellte. Sie zeigte ebenfalls auf, in welchem Ausmaß je nach unterschiedlichen Maßzahlen unterschiedliche Ergebnisse der Forschungsbewertung resultieren. Zwar geschah dies am Beispiel der fakultätsinternen Leistungsorientierten Mittelverteilung (LoM), aber das Ergebnis war sehr ähnlich:
Inter- und transdisziplinäre Forschung wie in den psychomedizinischen Fächern war bei der an den meisten Standorten angewandten Bewertungsmethodik besonders im Nachteil (siehe S. 93ff. in: https://www.researchgate.net/publication/271131149).
Seit Dezember 2023 gibt es mit den fortgeschriebenen ...
#4 - "Das Ergebnis ist ein wissenschaftliches Ökosystem, das…
Das haben doch wohl diejenigen zu verantworten, die diese "Evaluationsmechanismen" geschaffen haben, und das sind in erster Linie die staatlichen Technokraten, die die Drittmittel zum primären Ziel der universitären Forschung erklärt haben.
Aber leider hat sich das ganze Publikationssystem auch selbst pervertiert: In meinem Fach sind die meisten "guten" Zeitschriften in der Hand einiger weniger Verlage, die damit ein Geschäft machen. Und dann werden ständig neue Zeitschriften gegründet, fast jede Woche kommt eine Aufforderung per E-mail, in denen ...
#5 - Danke für den Beitrag.Aus geschichtswissenschaftlkcher…
Aus geschichtswissenschaftlkcher Sicht hier ein paar ähnliche Reflexionen: https://www.historikerverband.de/aktuelles/vhd-journal/vhd-journal-8/
#6 - Ein kleiner Einwand: "Drittmittel wiederum werden bereits…
#7 - "Das Ergebnis ist ein wissenschaftliches Ökosystem, das…
Das ist ja wenig überraschend. Das Phänomen nennt sich "Anreizsteuerung" und gilt in vielen Lebensbereichen. Und mit der zunehmenden Ökonomisierung der Gesellschaft breitet es sich natürlich aus. Dass die Anreize u.U. falsch gesetzt werden, sieht man nicht nur in der Wissenschaft - im Sport wird "nach Paris" auch heftig diskutiert, ob das Geld sinnvoll verteilt wird.
Über Zitationskartelle wurde schon vor dreißig Jahren diskutiert bzw. gelästert.
#8 - Na ja, vielleicht sollte man mal versuchen, neben dem…
Hier hilft auch ein Blick auf Experiment! der VW-Stiftung.
Neuen Kommentar hinzufügen