Data Colada

Data Colada ist ein Blog, der sich mit der Analyse und Replikation wissenschaftlicher Forschung befasst, wobei der Schwerpunkt auf der Validität der Ergebnisse in den Sozialwissenschaften liegt.^[1]

Der Blog ist bekannt für das Eintreten gegen problematische Forschungspraktiken wie p-Hacking und für die Veröffentlichung von Beweisen für Datenmanipulation in mehreren prominenten Fällen, darunter die prominenten Professoren Dan Ariely und Francesca Gino. Data Colada wurde 2013 von drei verhaltenswissenschaftlichen Forschern gegründet: Uri Simonsohn, Professor an der ESADE Business School, Barcelona/Spanien (ab 2023), Leif Nelson, Professor an der University of California, Berkeley, und Joe Simmons, Professor an der University of Pennsylvania.^[1]

Geschichte[Bearbeiten | Quelltext bearbeiten]

In Jahre 2011 schlossen sich Simmons, Nelson und Simonsohn wegen den „falschen, lächerlichen und auffälligen Ergebnissen“ die das Feld der Verhaltenswissenschaften hervorbrachte zusammen. Beispielsweise reagierten sie auf eine Arbeit des Cornell-Psychologen Daryl Bem, der angeblich Beweise für Hellseherei gefunden hatte, mit der Veröffentlichung eines einflussreichen Artikels^[1] über falsch positive Ergebnisse in der Psychologie. In diesem illustrierten sie das Problem mit einem parodierten Forschungsergebnis, das angeblich zeigte, dass das Hören des Beatles-Songs „When I'm Sixty-Four“ die Versuchspersonen eineinhalb Jahre jünger machte.^[2]

Im Jahr 2013 wurde der Blog „Data Colada“ mit dem Slogan „Thinking about evidence, and vice versa“ ins Leben gerufen.^[1] Er entwickelte sich zu „einem Zentrum für nerdige Diskussionen über statistische Methoden – und bald auch über verschiedene Forschungsverbrechen und -vergehen“ (New York Times).^[1]

Die drei Forscher wandten sich insbesondere gegen die damals weit verbreitete Praxis des Rosinenpickens [im Englischen: „cherry-picking“] von Daten und den Versuch, statistisch unbedeutende Ergebnisse statistisch signifikant erscheinen zu lassen – für diese Praxis prägten sie 2014 in einer wissenschaftlichen Veröffentlichung den Begriff p-hacking.^[2][3][4]

Bemerkenswerte Resultate[Bearbeiten | Quelltext bearbeiten]

Data Colada hat nicht nur fehlerhafte, aber vermutlich gut gemeinte Forschungspraktiken angeprangert, sondern auch Beweise für bewusste Datenmanipulationen und Fehlverhalten in der Forschung veröffentlicht. Dazu gehören Studien des Psychologen Lawrence Sanna und Forschungen des flämischen Psychologen Dirk Smeesters.^[2] Laut The New Yorker fanden die Karrieren von Sanna und Smeesters nach der Veröffentlichung ihrer Arbeiten durch Data Colada „ein unrühmliches Ende“.^[2]

Im Jahr 2021 entdeckte Data Colada fabrizierte Daten in einer 2012 in PNAS^[5] veröffentlichten Feldstudie von Lisa L. Shu, Nina Mazar, Francesca Gino, Dan Ariely und Max H. Bazerman.^[6][7] Alle Autoren der Studie stimmten mit ihrer Einschätzung überein und die Studie wurde zurückgezogen.^[7] Die Autoren stimmten auch darin überein, dass Ariely der einzige Autor war, der Zugang zu den Daten hatte, bevor er sie in ihrer gefälschten Form an Mazar, welche sie analysierte, weiterleitete. Ariely bestreitet, die Daten manipuliert zu haben, aber die Excel-Metadaten zeigten, dass er die Tabelle erstellt und als letzter bearbeitet hat.^[8] Ariely hat behauptet, dass jemand bei der Versicherungsagentur, die die Daten zur Verfügung gestellt hat, diese gefälscht haben muss.^[2][9][10]

Einzelnachweise[Bearbeiten | Quelltext bearbeiten]

1. ↑ ^{a b c d e} Noam Scheiber: The Harvard Professor and the Bloggers. In: The New York Times. 30. September 2023, abgerufen am 1. Oktober 2023 (amerikanisches Englisch). 
2. ↑ ^{a b c d e} Lewis-Kraus, Gideon: "They Studied Dishonesty. Was Their Work a Lie?Ä. The New Yorker, 1. Oktober 2023, abgerufen am 1. Oktober 2023. 
3. ↑ Nidhi Subbaraman: The Band of Debunkers Busting Bad Scientists. In: Wall Street Journal. 24. September 2023, abgerufen am 8. Oktober 2023 (amerikanisches Englisch). 
4. ↑ APA PsycNet. In: psycnet.apa.org. Abgerufen am 8. Oktober 2023 (englisch). 
5. ↑ A study on dishonesty was based on fraudulent data In: The Economist, 20. August 2021. Abgerufen am 23. August 2021 
6. ↑ [98] Evidence of Fraud in an Influential Field Experiment About Dishonesty. In: Data Colada. 17. August 2021, abgerufen am 18. August 2021 (amerikanisches Englisch). 
7. ↑ ^{a b} Stephanie M. Lee: A Famous Honesty Researcher Is Retracting A Study Over Fake Data. In: BuzzFeed News. 20. August 2021, abgerufen am 23. August 2021 (englisch). 
8. ↑ [98] Evidence of Fraud in an Influential Field Experiment About Dishonesty. In: Data Colada. 17. August 2021, abgerufen am 18. August 2021 (amerikanisches Englisch). 
9. ↑ Aaron Charlton: Dan Ariely claims authorship order shields him from blame; speculates that a low-level envelope stuffer committed the fraud. In: OpenMKT.org. 21. August 2022, abgerufen am 30. Januar 2023 (amerikanisches Englisch). 
10. ↑ דן אריאלי: "אנשים צועקים עליי ברחוב, קוראים לי רוצח ופסיכופת" In: הארץ. Abgerufen am 30. Januar 2023 (hebräisch).