Wie stark beeinflussen menschliche Entscheidungen im Forschungsprozess die Qualität der empirischen Ergebnisse?
Michael Koetter, Shuo Xia
Wirtschaft im Wandel,
Nr. 4,
2022
Abstract
Wie bedeutend ist das menschliche Element für die Genauigkeit empirischer Erkenntnisse in den Wirtschaftswissenschaften? Die Unsicherheit empirischer Schätzungen wird üblicherweise als ein statistisches Phänomen betrachtet. Unbekannte Parameter einer Grundgesamtheit werden anhand einer Stichprobe geschätzt, deren Erzeugung zu so genannten Standardfehlern führt. Forschende treffen jedoch viele unbeobachtete Entscheidungen, die nicht per se richtig oder falsch sind, sich aber auf das Ergebnis der Schätzung auswirken. Beispiele hierfür sind die Wahl der Software, die Art der Datenbereinigung oder die Spezifikation der Kontrollvariablen, um nur einige zu nennen. Wir haben an einem großen crowd-basierten Feldexperiment teilgenommen, bei dem sich herausstellte, dass dieser evidenzgenerierende Prozess von Forscher zu Forscher stark variiert, wodurch eine neue Art von Unsicherheit entsteht: so genannte Nicht-Standardfehler (NSE). 164 Teams von Finanzökonominnen und Finanzökonomen testeten sechs Hypothesen an einer identischen Stichprobe von Finanzmarktdaten. Das wichtigste Ergebnis ist, dass die Nicht-Standardfehler beträchtlich sind und die gleiche Größenordnung haben wie die Standardfehler, dass sie aber nach einem anonymen Begutachtungsprozess deutlich abnehmen. Wer sich von Wirtschaftsforschern beraten lässt, sollte sich daher darüber im Klaren sein, dass die Entscheidungen der einzelnen Forschenden die empirische Evidenz mit einer nicht unerheblichen Unsicherheit behaften. Gleichzeitig scheint eine der Veröffentlichung vorausgehende Begutachtung der Ergebnisse durch wissenschaftliche Kollegen (peer-review) die Anfälligkeit für diese Art von Unsicherheit zu verringern.
Artikel Lesen
Gemeinschaftsdiagnose
Gemeinschaftsdiagnose Die Gemeinschaftsdiagnose ist ein Instrument zur Beurteilung...
Zur Seite
Finanzstabilität
Finanzsysteme: Die Anatomie der Marktwirtschaft Wie ist das Finanzsystem aufgebaut, wie funktioniert es, wie...
Zur Seite
Startseite
IWH-Insolvenztrend: Viertes Quartal beginnt mit mehr Firmenpleiten Deutlich schneller als die amtliche Statistik liefert...
Zur Seite
Verhalten
Die Mathematik der Bauchentscheidungen Zuerst Kosten und Nutzen sorgfältig abwägen und dann rational...
Zur Seite
Forschungscluster
Drei Forschungscluster ...
Zur Seite
Konjunktur
Gemeinschafts-Diagnose Herbst 2023 Kaufkraft kehrt zurück – Politische Unsicherheit hoch ...
Zur Seite
Infografiken
Infografiken Bilder sagen manchmal mehr als viele Worte – daher haben wir für Sie ein...
Zur Seite
Konjunkturprognosen
Konjunkturprognosen Das IWH erstellt regelmäßig für das laufende und das kommende...
Zur Seite