A Comment on "Friendship and female education: Evidence from a field experiment in Bangladeshi primary schools" by Hahn et al.
Hahn et al. (2020) haben im „Economic Journal“ eine im Rahmen eines randomisierten Experiments an 115 bangladeschischen Grundschulen durchgeführte Studie veröffentlicht, bei der die Schüler eine Woche lang entweder in Freundesgruppen oder mit zufällig ausgewählten Mitschülern lernten. Sie stellen fest, dass die „Freunde“-Gruppe die Leistungen in Mathematik verbessert, allerdings nur bei Mädchen mit geringen Fähigkeiten. Wir identifizieren vier Arten ungelöster Unstimmigkeiten: widersprüchliche Angaben zu den Zuständigkeiten bei der Durchführung, Unregelmäßigkeiten in der Stichprobe und der Gruppenstruktur, Diskrepanzen zwischen den berichteten Verfahren und den beobachteten Daten sowie unplausible Muster bei fehlenden Daten und bei der Anwesenheit von Schülern zu verschiedenen Beobachtungszeitpunkten. Zusammengenommen handelt es sich bei diesen Problemen nicht lediglich um Unvollkommenheiten in der Berichterstattung, sondern sie offenbaren zahlreiche Unstimmigkeiten zwischen dem veröffentlichten Bericht, früheren Versionen der Studie, den Replikationsdaten und den beiden anschließend von den Autoren vorgelegten Antworten. Diese ungeklärten Unstimmigkeiten verhindern eine unabhängige Überprüfung wesentlicher Aspekte der Studienunterlagen und lassen ernsthafte Zweifel an der Glaubwürdigkeit der berichteten Ergebnisse aufkommen.