Is Economics Self-Correcting? Replications in the American Economic Review
Replikation und konstruktive Debatten sind für den wissenschaftlichen Fortschritt unerlässlich. Dieses Papier untersucht die Auswirkungen aller Replikationen, die zwischen 2010 und 2020 als Kommentare (engl. Comments) im American Economic Review erschienen sind. Wir untersuchen die Zitationen von Kommentaren und ob sich die Veröffentlichung eines Kommentars auf die Zitationen des Originalartikels auswirkt. Wir stellen fest, dass die meisten Kommentare kaum zitiert werden, und dass sie keinen Einfluss auf die nachfolgenden Zitationen der Originalartikel haben. Dieses Ergebnis gilt auch für Originalartikel, bei denen der Kommentar ein gravierendes inhaltliches Problem diagnostiziert. Wir schließen aus diesen Zitationsmustern, dass Replikationen die wirtschaftswissenschaftliche Literatur nicht aktualisieren. In einer Online-Umfrage haben wir die Meinungen der Autoren von Kommentaren und Originalartikeln eingeholt. Wir haben festgestellt, dass in den meisten Fällen weder Konsens über das Ergebnis der Replikation besteht, noch ob der Beitrag der Originalartikel weiterhin Gültigkeit hat. Dies deckt sich mit der gängigen Meinung, dass Robustheit und Replizierbarkeit in den Wirtschaftswissenschaften schwer zu definieren sind.