Änderungen

==Beispiel: publication bias in der PSI-Forschung==

==Beispiel: publication bias in der PSI-Forschung==

Ein Beispiel für einen Fall eines publication bias war die Unmöglichkeit von Forschern, eine gescheiterte Replikation einer publizierten Studie zu einem hypothetischen PSI-Effekt des Professor emeritus an der Cornell University, Daryl Bem in einem peer-reviewten Journal zu veröffentlichen. Daryl Bem hatte behauptet, dass [[Präkognition]], also die behauptete Fähigkeit, [[Hellsehen|die Zukunft vorsagen zu können]], existiert. Mit seinen Experimenten an 1.000 Versuchspersonen wollte er gezeigt haben, dass diese besser bei Tests abschnitten, wenn sie im Nachhinein “übten”. Autor Bem konnte seine Studie 2011 im peer-reviewten Journal of Personality and Social Psychology veröffentlichen.<ref>Daryl J. Bem, Feeling the Future: Experimental Evidence for  

Ein Beispiel für einen Fall eines publication bias war die Unmöglichkeit von Forschern, eine gescheiterte Replikation einer publizierten Studie zu einem hypothetischen [[Parapsychologie|PSI-Effekt]] des Professor emeritus an der Cornell University, Daryl Bem in einem peer-reviewten Journal zu veröffentlichen. Daryl Bem hatte behauptet, dass [[Präkognition]], also die behauptete Fähigkeit, [[Hellsehen|die Zukunft vorsagen zu können]], existiert. Mit seinen Experimenten an 1.000 Versuchspersonen wollte er gezeigt haben, dass diese besser bei Tests abschnitten, wenn sie im Nachhinein “übten”. Autor Bem konnte seine Studie 2011 im peer-reviewten Journal of Personality and Social Psychology veröffentlichen.<ref>Daryl J. Bem, Feeling the Future: Experimental Evidence for  

Anomalous Retroactive Influences on Cognition and Affect, Journal of Personality and Social Psychology, (2011) 100, 407-425 [http://dbem.ws/FeelingFuture.pdf Volltext online]</ref> Bem ermutigte ausdrücklich Fachkollegen seine Studie mit gleicher Methodik zu wiederholen: ''..Issues of Replication - Replication packages are available on request for Macintosh and Windows-based computers to encourage and facilitate replication of the experiments reported here. I suspect that the experiments on retroactive priming and retroactive facilitation of recall will be the easiest to replicate successfully..''

Anomalous Retroactive Influences on Cognition and Affect, Journal of Personality and Social Psychology, (2011) 100, 407-425 [http://dbem.ws/FeelingFuture.pdf Volltext online]</ref> Bem ermutigte ausdrücklich Fachkollegen seine Studie mit gleicher Methodik zu wiederholen: ''..Issues of Replication - Replication packages are available on request for Macintosh and Windows-based computers to encourage and facilitate replication of the experiments reported here. I suspect that the experiments on retroactive priming and retroactive facilitation of recall will be the easiest to replicate successfully..''<br>

 

Tatsächlich wurde das Experiment von Bem wiederholt, diesmal jedoch konnte der von Bem unterstellte und beobachtete  parapsychologische Effekt nicht nachgewiesen werden. Die Wiederholbarkeit ist eines der Hauptkriterien wissenschaftlicher Experimente und der wissenschaftlichen Forschung. Die widerlegende Arbeit wurde ebenfalls beim Journal of Personality and Social Psychology – dem Journal, das auch Bem publiziert hatte – eingereicht, aber abgelehnt, da es “nur” eine Replikation eines Experiments sei. Einer der beteiligten ablehnenden reviewer war Bem selbst. Auch in anderen Journalen gelang es den Autoren nicht die arbeit zu veröffentlichen. Zitat: ''..There’s a real problem with finding shocking findings and then not being interested in publishing replications..'' Den Autoren blieb nur den Weg einer Veröffentlichung in einem nicht peer-reviewten Journal, beim Open Access Journal PLoS ONE.

 

 

 

 

 

 

 

 

 

Natürlich fanden sich sofort Kritikpunkte an der Studie, aber wie es nun in der Wissenschaft so üblich ist, wurde das Wichtigste Experiment unabhängig wiederholt, um Nachweise für den genannten Effekt zu finden. Jeder Skeptiker wird wahrscheinlich ob des Ergebnisses total verblüfft sein: “Nichts.”

 

Der Effekt, den Bem beobachtet hatte, konnte nicht repliziert werden. Wiederholbarkeit ist jedoch eines der Hauptkriterien wissenschaftlicher Experimente und ohne Wiederholbarkeit hat man “Nichts”.

 

 

 

 

Also, da haben wir auf der einen Seite ein dubioses Ergebnis, das sich nicht mit unserem Erkenntnisstand vereinbaren lässt. Aber das Ergebnis, das zum aktuellen Wissensstand passt, soll durch Voreingenommenheit verfälscht sein.

 

 

Die Autoren der Studie antworten auf diese und andere vorgebrachte Argumente in einem eigenen Kommentar, in dem sie ihre Vorgehensweise erklären und zu den Vorwürfen von Bem Stellung nehmen.

 

Spannend ist noch zu erwähnen, dass die Studie ebenfalls beim Journal of Personality and Social Psychology – dem Journal, das auch Bem publiziert hatte – eingereicht und dann abgelehnt wurde, da es “nur” eine Replikation eines Experiments sei.

 

Einer der Autoren der Studie (Ritchie) zeigt sich bestürzt:

 

“There’s a real problem with finding shocking findings and then not being interested in publishing replications,”

 

Es zeigt das Problem des Publikationsbias sehr schön. Journale sind nicht interessiert an Studien mit negativen Ergebnissen – speziell solchen, die einfach nur vorhergehende Ergebnisse prüfen. Nur Erfolge zählen, Misserfolge sind nicht erwünscht. Auch weitere Versuche, das Papier zu veröffentlichen, schlugen fehl, diverse Journale lehnten ab. Besonders pikant die Ablehnung durch das “British Journal of Psychology”, da dort Bem selbst einer der Reviewer war. (Der Bock zum Gärtner …)

 

Die Autoren waren dann sehr erfreut, dass sie ihre Arbeit schließlich beim Open Access Journal PLoS ONE(Public Library of Science) veröffentlichen konnten.

 

 

 

Was die Journale und ihre Publikationsstrategie angeht, so zeigt dieses Beispiel einmal mehr, dass Änderungen notwendig sind. Wir haben ja schon öfter über die Journal/Publikations/Open Science-Thematik geschrieben; es steht zu hoffen, dass Publikationsbias irgendwann der Vergangenheit angehört.

==Weblinks==

==Weblinks==