Selektives Berichten und die evolvierende Forschungslandschaft in den Wirtschaftswissenschaften
Zusammenfassung der Projektergebnisse
Dieses Projekt leistet einen Beitrag zur Meta-Forschung in der Volkswirtschaftslehre mit dem Ziel, die Verlässlichkeit veröffentlichter Forschung zu verbessern. Die Hauptleistung dieses Projekts ist die Entwicklung von DORIS (Diagnosis of reporting errors in scraped tables), einem Software-Tool, das statistische Tests aus wirtschaftswissenschaftlichen Artikeln automatisch erfasst. Durch die Automatisierung des manuellen Codingprozesses kann dieses Tool die zukünftige Meta-Forschung und den Peer-Review-Prozess unterstützen. Die Anwendung von DORIS auf die Top 50 wirtschaftswissenschaftlichen Zeitschriften führte zu einem Datensatz mit mehr als 600.000 statistischen Tests. Wir nutzen diese einzigartigen Daten und weitere Datensätze, um (1) das Ausmaß von Fehlern im Berichten statistischer Ergebnisse in der Volkswirtschaftslehre zu bewerten, (2) das Ausmaß selektiven Berichtens bestimmter Ergebnisse, die Ursachen sowie die Wirksamkeit von Richtlinien zur Daten- und Codeverfügbarkeit von Zeitschriften zu analysieren, (3) die sich wandelnde Forschungslandschaft in der Volkswirtschaftslehre zu untersuchen und (4) die Beziehung zwischen statistischen Ergebnissen und der in Fachartikeln genutzten Sprache zu analysieren, wie z.B. Lesbarkeit und Verwendung von Superlativen.
Projektbezogene Publikationen (Auswahl)
-
THE (NON‐)SIGNIFICANCE OF REPORTING ERRORS IN ECONOMICS: EVIDENCE FROM THREE TOP JOURNALS. Journal of Economic Surveys, 35(1), 348-373.
Pütz, Peter & Bruns, Stephan B.
-
Statistical reporting errors in economics. Center for Open Science.
Bruns, Stephan; Herwartz, Helmut; Ioannidis, John P.A.; Islam, Chris-Gabriel & Raters, Fabian H. C.
-
Estimating the extent of selective reporting: An application to economics. Research Synthesis Methods, 15(4), 590-602.
Bruns, Stephan B.; Deressa, Teshome K.; Stanley, T. D.; Doucouliagos, Chris & Ioannidis, John P. A.
-
Footprint of publication selection bias on meta‐analyses in medicine, environmental sciences, psychology, and economics. Research Synthesis Methods, 15(3), 500-511.
Bartoš, František; Maier, Maximilian; Wagenmakers, Eric‐Jan; Nippold, Franziska; Doucouliagos, Hristos; Ioannidis, John P. A.; Otte, Willem M.; Sladekova, Martina; Deresssa, Teshome K.; Bruns, Stephan B.; Fanelli, Daniele & Stanley, T. D.
