• Sunday February 17,2019

Fangbetrug: Simonsohn sagt

Alle sprachen über den Psychologen Uri Simonsohn und seine Rolle beim Sturz zweier wissenschaftlicher Betrüger.

Als die Geschichte zum ersten Mal ausbrach, waren die Methoden, die Simonsohn benutzte, um die zwielichtigen Daten zu entdecken, geheimnisvoll - was nur das Summen erhöhte. Das Papier, das den Ansatz enthüllt, ist jetzt online und muss gelesen werden. Es ist nicht oft eine Statistikzeitung, die die schreckliche Bahnfreude bietet, wenn zwei betrügerische Karrieren zu einem wohlverdienten Ende kommen.

Das Beunruhigende an dem Artikel ist jedoch, dass er eigentlich nicht viel Neues enthält. Simonsohn benutzte Statistiken, um Daten in veröffentlichten Papieren zu finden, die tatsächlich zu gut waren, um wahr zu sein. Er folgte dann scheinbar zwielichtigen Fällen mit ein paar weiteren Statistiken und verwendete Simulationen, wie reale Daten aussehen sollten, um zu überprüfen, ob sie tatsächlich erfunden waren. Eine einfache Idee im Nachhinein, die noch nie ausprobiert wurde. Ich glaube nicht, dass es eine einzige „Simonsohn-Methode“ gibt, vielmehr verwendet der Artikel mehrere Techniken, die jeweils auf die jeweiligen Daten zugeschnitten sind.

Aber es hätte nicht dazu kommen sollen. Jemand hätte erkennen müssen, dass die Daten zweifelhaft aussahen.

Nehmen Sie diese Tabelle von einer von Simonsohns Eroberungen, einer Zeitung, die bald zurückgezogen werden sollte , von Lawrence J Sanna et al.

Wir wissen jetzt, dass die Daten aus den Studien 2, 3 und 4 alle zusammengestellt wurden. In jeder Studie wurden drei Bedingungen verglichen, und diese Daten sind unklar, da die Standardabweichungen der drei Ergebnissätze für jede Studie nahezu identisch waren. Die Wahrscheinlichkeit, dass dies passiert, ist sehr gering und es deutet an, dass jemand die Daten (ungeschickt) zusammengestellt hat.

Ich werde sagen, dass diese Daten offensichtlich verdächtig sind, zumindest für jeden, der mit echten Daten gearbeitet hat. Vielleicht sagen Sie, dass Rückblick 20/20 ist, aber Simonsohn brauchte kein Rückblick und die Statistiken, die er benutzte, waren nichts Besonderes. Ich sage nicht, dass er, um seine Leistungen zu schmälern, viel Anerkennung verdient. Aber andere Leute verdienen Schuld.

Wer dieses Peer-Review durchgegangen hat, hätte nämlich feststellen müssen, dass diese Daten ungewöhnlich aussahen - und sie hätten keine speziellen statistischen Hilfsmittel dafür benötigen.

Simonsohn fordert, dass Zeitschriften verlangen, dass die Rohdaten für alle veröffentlichten Arbeiten zur Verfügung gestellt werden, mit der Begründung. Das ist eine großartige Idee - und nicht nur, weil sie dazu beitragen würde, schlechte Wissenschaft zu fangen: Sie würde die richtige Forschung und den unendlichen Unterricht erleichtern. Simonsohn brauchte jedoch keine Rohdaten, um diese Betrugsfälle zu erkennen - er überprüfte die Rohergebnisse nur, um den Verdacht anhand der veröffentlichten Daten zu bestätigen .

Die Überprüfung der Gültigkeit der Daten ist Aufgabe der Peer-Reviewer, die den Ball fallen lassen. Stattdessen musste Simonsohn seinen eigenen privaten Kreuzzug gegen Betrug durchführen.

ein bisschen wie Batman. Batman ist großartig, aber der Punkt in Bezug auf Batman ist, dass er nur gebraucht wird, weil die Polizei es nicht schafft oder nicht alleine bewältigen kann. Er ist kein Superheld, er ist nur ein Typ mit dem Willen.

Gutachter sind die Polizei der Wissenschaft, aber allzu oft schlafen sie bei der Arbeit. Nicht nur in der Psychologie. Retraction Watch bietet eine Vielzahl von Beispielen für veröffentlichte Ergebnisse in der Biologie, die gefälscht wurden, oft auf komische Art und Weise und für jeden, der aufmerksam ist, offensichtlich gewesen sein sollte.

Peer-Reviewer sind in der Regel anonym. Ich frage mich, ob eine Politik der retrospektiven Benennung und Benachteiligung der Rezensenten, wenn sich herausstellt, dass ein Artikel betrügerisch ist, sie motivieren könnte.

?


Interessante Artikel

Die klumpige Schwerkraft der Erde

Die klumpige Schwerkraft der Erde

[UPDATE (5. April 2011): Es stellt sich heraus, dass einige der Beschreibungen, die ich unten verwendet habe, um ein Geoid zu beschreiben, nicht genau waren. Ich verweise Sie auf diese Seite an der University of Oklahoma für eine gute Beschreibung. Ich habe unten einige Änderungen vorgenommen, um die Verwirrung hoffentlich zu lindern.]

Die Regeln der Anziehung

Die Regeln der Anziehung

Alena Haurylik / Shutterstock Die einfache Geschichte des Vergnügens ist, dass Tiere sich entwickeln, um zu genießen, was für sie gut ist; Freude ist die Karotte, die sie zu reproduktiv nützlichen Aktivitäten treibt. (Schmerz ist der Stock.) Es tut gut, wenn man durstig trinkt und hungrig isst, weil Tiere, die solche Freuden empfinden wollten, mehr Nachwuchs hatten als die, die nicht waren. Die

Insekten, die auf dem Ozean skaten, profitieren von Plastikmüll

Insekten, die auf dem Ozean skaten, profitieren von Plastikmüll

Stellen Sie sich eine Welt von zwei Dimensionen vor, eine Welt ohne Auf und Ab. Gerade vorbei. Kein Klettern, Fallen, Springen oder Ducken. einfach nur flattern und kegeln. Willkommen in der Welt der Skater. Meeresskater oder Meeresschreiter sind kleine Käfer. Sie sind Verwandte der Teichläufer oder Wasserläufer, die über die Oberfläche von Teichen und Seen reiten. Nur

Dieser Exosuit lernt, wie Sie gehen, um Ihnen einen Schub zu geben

Dieser Exosuit lernt, wie Sie gehen, um Ihnen einen Schub zu geben

Exosuits wirken wie Anime- und Superhelden-Filme, aber die Technologie wird tatsächlich dazu verwendet, diejenigen zu unterstützen, die möglicherweise einen Schub für ihr tägliches Leben benötigen. Diese tragbaren Technologien passen sich dem Körper an, normalerweise den Beinen, ähnlich wie bei einem High-Tech-Wetsuit. Der Ex

Die Geburt eines Sonnenfleckenhaufens

Die Geburt eines Sonnenfleckenhaufens

Wollten Sie schon immer sehen, wie sich Sonnenflecken bilden und verändern, wenn sie wachsen? Die Leute, die mit dem SDO-Satelliten der NASA arbeiten, haben dieses erstaunliche Video der entzückenden Jungen veröffentlicht. Bis ungefähr 18 Sekunden passiert nicht viel, und dann passiert viel . Das ist so verdammt cool. Im