Quelltext der Seite Replikationskrise

<p style="text-align: right">[[Unterstützen|'''Unterstützen Sie FreeWiki''']]</p>
{{Wikipedia1|en:Replication_Crisis | Replication Crisis|31.8.2019}}

'''Dieser Artikel ist eng mit dem Artikel über den [[Decline_Effect|Decline Effect]] verbunden, welcher Teil dieser Krise ist. Für weitere Erklärungen und Material siehe auch dort.'''

Die '''Replikationskrise''' (oder '''Wiederholbarkeitskrise''' oder '''Reproduzierbarkeitskrise''') ist eine andauernde (2019) methodische Krise, in der festgestellt wurde, dass viele wissenschaftliche Studien schwer oder unmöglich zu reproduzieren oder zu wiederholen sind. Die Replikationskrise betrifft die Sozial- und Biowissenschaften am stärksten, <ref>{{Cite journal | doi = 10.1038/515009a| title = Metascience could rescue the 'replication crisis'| journal = Nature| volume = 515| issue = 7525| pages = 9| year = 2014| last1 = Schooler | first1 = J. W.| pmid=25373639| bibcode = 2014Natur.515....9S}}</ref><ref name="Why 'Statistical Significance' Is Often Insignificant">{{cite web|last1=Smith|first1=Noah|title=Why 'Statistical Significance' Is Often Insignificant|url=https://www.bloomberg.com/view/articles/2017-11-02/why-statistical-significance-is-often-insignificant|website=Bloomberg|accessdate=7 November 2017}}</ref>, während die exakten Wissenschaften immer noch zögern, sich dem Problem überhaupt zu stellen und in ihrer Forschung meistens nicht einmal Verblindung verwenden.<ref>[[Rupert Sheldrake]]: The Science Delusion – Freeing the Spirit of Enquiry; London 2012, Hodder& Stoughton, ISBN 978 1 444 72795 1. Chapter 11. Illusions of Objectivity.</ref> Die Krise hat langjährige Wurzeln. Der Begriff selbst wurde Anfang 2010 geprägt<ref>{{Cite journal | doi = 10.1177/1745691612465253| title = Editors' Introduction to the Special Section on Replicability in Psychological Science: A Crisis of Confidence?| journal = Perspectives on Psychological Science| volume = 7| issue = 6| pages = 528–530| year = 2012| last1=Pashler|first1=Harold |last2=Wagenmakers | first2=Eric Jan| pmid=26168108}}</ref> als Teil eines wachsenden Problembewusstseins. Die Replikationskrise bildet in der Wissenschaftstheorie einen wichtigen Forschungsgegenstand. <ref>{{cite web |last1=Fidler |first1=Fiona |last2=Wilcox |first2=John |title=Reproducibility of Scientific Results |url=https://plato.stanford.edu/entries/scientific-reproducibility/#MetaScieEstaMoniEvalReprCris |website=The Stanford Encyclopedia of Philosophy |publisher=Metaphysics Research Lab, Stanford University |accessdate=19 May 2019 |date=2018}}</ref>

Da die Reproduzierbarkeit von Experimenten ein wesentlicher Bestandteil der wissenschaftlichen Methode ist,<ref>Staddon, John (2017) Scientific Method: How science works, fails to work or pretends to work.  Taylor and Francis.</ref> hat die Unmöglichkeit, die Studien anderer zu replizieren, potenziell schwerwiegende Folgen für viele Wissenschaftsbereiche, in denen bedeutende Theorien auf nicht reproduzierbaren experimentellen Arbeiten basieren. Die Replikationskrise wurde insbesondere im Bereich der Psychologie (insbesondere der Sozialpsychologie) und in der Medizin diskutiert, wo eine Reihe von Bemühungen unternommen wurden, klassische Ergebnisse neu zu untersuchen und zu versuchen, sowohl die Zuverlässigkeit der Ergebnisse als auch, wenn sie sich als unzuverlässig erweisen, die Gründe für das Scheitern der Replikation zu bestimmen.<ref>{{cite web|url=http://www.newyorker.com/tech/elements/the-crisis-in-social-psychology-that-isnt|title=The Crisis in Social Psychology That Isn't|author=Gary Marcus|publisher=The New Yorker|date=May 1, 2013}}</ref><ref>{{cite web|url=http://www.newyorker.com/magazine/2010/12/13/the-truth-wears-off|title=The Truth Wears Off|author=Jonah Lehrer|publisher=The New Yorker|date=December 13, 2010}}</ref>

== Umfang der Krise ==

=== Insgesamt ===

Laut einer Umfrage von 1.500 Wissenschaftlern im Jahr 2016 berichteten 70% von ihnen, dass sie es versäumt hatten, mindestens ein anderes Experiment eines Wissenschaftlers zu reproduzieren (50% hatten es versäumt, eines ihrer eigenen Experimente zu reproduzieren).<ref>{{cite web|title=Is There a Reproducibility Crisis in Science?|url=https://www.scientificamerican.com/video/is-there-a-reproducibility-crisis-in-science/|publisher=Nature Video, Scientific American|date=28 May 2016|accessdate=15 August 2019}}</ref> Im Jahr 2009 haben 2% der Wissenschaftler, die zur Fälschung von Studien zugelassen wurden, mindestens einmal und 14%, die zur persönlichen Kenntnisnahme von jemandem, der dies tat, zugelassen wurden. Fehlverhalten wurde häufiger von medizinischen Forschern gemeldet als von anderen.<ref>{{cite journal|title=How Many Scientists Fabricate and Falsify Research? A Systematic Review and Meta-Analysis of Survey Data|first=Daniele|last=Fanelli|date=29 May 2009|journal=PLOS ONE|volume=4|issue=5|pages=e5738|doi=10.1371/journal.pone.0005738|pmid=19478950|pmc=2685008|bibcode=2009PLoSO...4.5738F}}</ref></br>
Ein weiterer wesentlicher Aspekt der Krise ist, dass der Sinn und die Brauchbarkeit des Signifikanzwertes p, nach welchem seit Jahrzehnten alle wissenschaftlichen Arbeiten als statistisch relevant oder wertlos beurteilt werden, grundlegend in Zweifel gezogen wird. In der Zeitschrift Nature<ref>Amrhein, V., Greenland, S., & MCShane, B. , 2019. Retire statistical significance. Nature, 567, p. 305-307</ref> haben kürzlich hunderte ForscherInnen einen Appell veröffentlicht, die übliche Signifikanzgrenze von 0,05 gänzlich in den Ruhestand zu schicken und statt dessen andere wissenschaftliche Kriterien zur Bewertung der Gültigkeit von in Studien gefundenen Effekten heranzuziehen.<ref>Dieser Zusammenhang wird ausführlich und gut verständlich erklärt von Harald Walach in seinem Blog: [https://harald-walach.de/2019/03/27/der-signifikanz-mythos-broeckelt/ Der Signifikanz-Mythos bröckelt.]</ref> 

=== Psychologie ===

Mehrere Faktoren sind zusammengekommen und haben die Psychologie in den Mittelpunkt der Kontroverse gebracht.<ref>{{cite web|last1=Achenbach|first1=Joel|title=No, science's reproducibility problem is not limited to psychology|url=https://www.washingtonpost.com/news/speaking-of-science/wp/2015/08/28/no-sciences-reproducibility-problem-is-not-limited-to-psychology/|website=The Washington Post|accessdate=10 September 2015}}</ref> Ein Großteil des Fokus lag dabei auf dem Bereich der Sozialpsychologie,<ref>{{Cite news|url=https://www.nytimes.com/2017/10/18/magazine/when-the-revolution-came-for-amy-cuddy.html|title=When the Revolution Came for Amy Cuddy|last=Dominus|first=Susan|date=2017-10-18|work=The New York Times|access-date=2017-10-19|language=en-US|issn=0362-4331}}</ref> obwohl andere Bereiche der Psychologie wie die klinische Psychologie,<ref>{{cite journal|last1=Leichsenring|first1=Falk|last2=Abbass|first2=Allan|author-link2=Allan Abbass|last3=Hilsenroth|first3=Mark J.|last4=Leweke|first4=Frank|last5=Luyten|first5=Patrick|last6=Keefe|first6=Jack R.|last7=Midgley|first7=Nick|last8=Rabung|first8=Sven|last9=Salzer|first9=Simone|last10=Steiner|first10=Christiane|title=Biases in research: risk factors for non-replicability in psychotherapy and pharmacotherapy research|journal=[[Psychological Medicine]]|year=April 2017|volume=47|issue=6|pages=1000–1011|doi=10.1017/S003329171600324X|pmid=27955715|url=http://discovery.ucl.ac.uk/1532689/}}</ref><ref>{{cite journal|last=Hengartner|first=Michael P.|title=Raising Awareness for the Replication Crisis in Clinical Psychology by Focusing on Inconsistencies in Psychotherapy Research: How Much Can We Rely on Published Findings from Efficacy Trials?|journal=[[Frontiers in Psychology]]|volume=9|pages=256|publisher=[[Frontiers Media]]|doi=10.3389/fpsyg.2018.00256|pmid=29541051|pmc=5835722|date=February 28, 2018}}</ref>  Entwicklungspsychologie,<ref>{{cite journal|last1=Frank|first1=Michael C.|author-link1=Michael C. Frank|last2=Bergelson|first2=Elika|last3=Bergmann|first3=Christina|last4=Cristia|first4=Alejandrina|last5=Floccia|first5=Caroline|last6=Gervain|first6=Judit|last7=Hamlin|first7=J. Kiley|last8=Hannon|first8=Erin E.|last9=Kline|first9=Melissa|last10=Levelt|first10=Claartje|last11=Lew-Williams|first11=Casey|last12=Nazzi|first12=Thierry|last13=Panneton|first13=Robin|last14=Rabagliati|first14=Hugh|last15=Soderstrom|first15=Melanie|last16=Sullivan|first16=Jessica|last17=Waxman|first17=Sandra|author-link17=Sandra Waxman|last18=Yurovsky|first18=Daniel|title=A Collaborative Approach to Infant Research: Promoting Reproducibility, Best Practices, and Theory‐Building|journal=[[Infancy (journal)|Infancy]]|volume=22|issue=4|pages=421–435|date=9 March 2017|url=http://callab.uchicago.edu/papers/fetal-infancy-inpress.pdf|doi=10.1111/infa.12182|access-date=19 December 2018|hdl=10026.1/9942}}</ref> und Bildungsforschung ebenfalls einbezogen wurden.<ref>{{cite journal|last=Tyson|first=Charlie|title=Failure to Replicate|journal=[[Inside Higher Ed]]|date=14 August 2014|url=https://www.insidehighered.com/news/2014/08/14/almost-no-education-research-replicated-new-article-shows|access-date=19 December 2018}}</ref><ref>{{cite journal|last1=Makel|first1=Matthew C.|last2=Plucker|first2=Jonathan A.|author-link2=Jonathan A. Plucker|title=Facts Are More Important Than Novelty: Replication in the Education Sciences|journal=[[Educational Researcher]]|date=1 August 2014|volume=43|issue=6|pages=304–316|doi=10.3102/0013189X14545513|access-date=19 December 2018|url=https://journals.sagepub.com/stoken/rbtfl/w5mrNxPVD8zSg/full}}</ref> According to a 2018 survey of 200 meta-analyses, "psychological research is, on average, afflicted with low statistical power".<ref>{{Cite journal|last=Stanley|first=T. D.|last2=Carter|first2=Evan C.|last3=Doucouliagos|first3=Hristos|date=2018|title=What meta-analyses reveal about the replicability of psychological research.|journal=Psychological Bulletin|language=en|volume=144|issue=12|pages=1325–1346|doi=10.1037/bul0000169|pmid=30321017|issn=1939-1455}}</ref>

Erstens wurden fragwürdige Forschungspraktiken („questionable research practices“ = QRPs) als üblich im Bereich.<ref name=":0" /> Solche Praktiken, obwohl sie nicht absichtlich betrügerisch sind, beinhalten die Nutzung der Grauzone akzeptabler wissenschaftlicher Praktiken oder die Nutzung der Flexibilität bei der Datenerfassung, -analyse und -berichterstattung, oft in dem Bestreben, ein gewünschtes Ergebnis zu erzielen. Beispiele für QRPs sind selektive Berichterstattung oder teilweise Veröffentlichung von Daten (nur einige der Studienbedingungen oder gesammelte abhängige Messungen in einer Publikation), optionales Stoppen (Wahl, wann die Datenerhebung gestoppt werden soll, oft basierend auf der statistischen Signifikanz von Tests), ''p''-Wertrundung (Aufrunden der ''p''-Werte auf 0.05, um statistische Signifikanz nahezulegen), den Schubladeneffekt (Nichtveröffentlichung von Daten), das Post-Hoc-Storytelling (Framing explorativer Analysen als Bestätigungsanalysen) und die Manipulation von Ausreißern (entweder das Entfernen von Ausreißern oder das Belassen von Ausreißern in einem Datensatz, um einen statistischen Test signifikant wirken zu lassen).<ref name=":0">{{Cite journal|title = Measuring the Prevalence of Questionable Research Practices With Incentives for Truth Telling|url = https://www.hbs.edu/faculty/Publication%20Files/QRP12_a137cc09-45bc-4eae-9ee9-c0cb47f14add.pdf|journal = Psychological Science|date = 2012-05-01|issn = 0956-7976|pmid = 22508865|pages = 524–532|volume = 23|issue = 5|doi = 10.1177/0956797611430953|first = Leslie K.|last = John|first2 = George|last2 = Loewenstein|first3 = Drazen|last3 = Prelec}}</ref><ref>{{Cite journal|title = The Nine Circles of Scientific Hell|journal = Perspectives on Psychological Science|date = 2012-11-01|issn = 1745-6916|pmid = 26168124|pages = 643–644|volume = 7|issue = 6|doi = 10.1177/1745691612459519}}</ref><ref>{{Cite web|title = Research misconduct - The grey area of Questionable Research Practices|url = http://www.vib.be/en/news/Pages/Research-misconduct---The-grey-area-of-Questionable-Research-Practices.aspx|website = www.vib.be|accessdate = 2015-11-13}}</ref><ref>{{Cite journal|title = Questionable Research Practices Revisited|journal = Social Psychological and Personality Science|date = 2015-10-19|issn = 1948-5506|pages = 45–52|doi = 10.1177/1948550615612150|first = Klaus|last = Fiedler|first2 = Norbert|last2 = Schwarz|volume=7}}</ref> Eine Umfrage unter über 2.000 Psychologen ergab, dass eine Mehrheit der Befragten die Verwendung mindestens eines QRP zugelassen hat.<ref name=":0" /> Falsch positive Schlussfolgerungen, die sich oft aus dem Druck zur Veröffentlichung oder des eigenen ''„confirmation bias“'' des Autors ergeben, sind eine inhärente Gefahr für das Feld und erfordern ein gewisses Maß an Skepsis seitens der Leser.<ref name="Simmons et al. (2011)">{{cite journal|last1 = Simmons|first1 = Joseph|first2 = Leif|last2 = Nelson|first3 = Uri|last3 = Simonsohn|title = False-Positive Psychology: Undisclosed Flexibility in Data Collection and Analysis Allows Presenting Anything as Significant|journal = [[Psychological Science]]|volume = 22|issue = 11|pages = 1359–1366|date = November 2011|issn = 0956-7976|doi = 10.1177/0956797611417632|pmid = 22006061}}</ref>

Zweitens haben sich insbesondere die Psychologie und die Sozialpsychologie im Mittelpunkt mehrerer Skandale wiedergefunden. bei denen es um echten Forschungsbetrug ging, vor allem die eingestandene Erfindung von Daten durch Diederik Stapel<ref>{{cite journal|url=http://chronicle.com/article/As-Dutch-Research-Scandal/129746/|title=Fraud Scandal Fuels Debate Over Practices of Social Psychology|journal=The Chronicle of Higher Education|first=Christopher|last=Shea|date=13 November 2011}}</ref> sowie Vorwürfe gegen andere. Die meisten Wissenschaftler erkennen jedoch an, dass Betrug vielleicht der geringere Beitrag zu Replikationskrisen ist.

Drittens haben sich mehrere Effekte in der Psychologie bereits vor der aktuellen Replikationskrise als schwer reproduzierbar erwiesen. So hat beispielsweise die Fachzeitschrift "''Judgment and Decision Making''" im Laufe der Jahre mehrere Studien veröffentlicht, die die Theorie des unbewussten Denkens nicht unterstützen konnten. Replikationen erscheinen besonders schwierig, wenn Forschungsstudien vorregistriert und von Forschergruppen durchgeführt werden, die für die fragliche Theorie nicht sehr stark engagiert sind.

Diese drei Elemente zusammen haben zu einer erneuten Aufmerksamkeit für die Replikation geführt, die vom Psychologen Daniel Kahneman unterstützt wird.<ref>{{cite web|title=A New Etiquette for Replication|url=https://www.scribd.com/doc/225285909/Kahneman-Commentary|first=Daniel|last=Kahneman|via=Scribd}}</ref> Die Untersuchung vieler Effekte hat gezeigt, dass einige Kernüberzeugungen schwer zu replizieren sind. Eine aktuelle Sonderausgabe der Zeitschrift ''Sozialpsychologie'', die sich auf Replikationsstudien konzentrierte, und eine Reihe von bisher vertretenen Überzeugungen erwiesen sich als schwer zu replizieren.<ref>{{cite journal|year=2014 |title= Link to issue<!-- NONE - reference to entire issue -->|url=http://www.psycontent.com/content/l67413865317/?p=3f8268e0307f4036906c158b1667c57a&pi=0 |journal=Social Psychology |publisher=Hogrefe Publishing |volume=45 |issue=3 |archive-url=https://archive.is/20140530230728/http://www.psycontent.com/content/l67413865317/?p=3f8268e0307f4036906c158b1667c57a&pi=0 |archive-date=30 May 2014}}</ref> Eine Sonderausgabe der Zeitschrift ''Perspectives on Psychological Science'' aus dem Jahr 2012 konzentrierte sich auch auf Themen, die vom ''publication bias'' bis zur Null-Aversion reichen und zu den Replikationskrisen in der Psychologie beitragen.<ref>[http://pps.sagepub.com/content/7/6.toc Inhaltsverzeichnis]</ref> Im Jahr 2015 wurde die erste offene empirische Studie zur Reproduzierbarkeit in der Psychologie veröffentlicht, das so genannte Reproduzierbarkeitsprojekt. Forscher aus der ganzen Welt arbeiteten zusammen, um 100 empirische Studien aus drei führenden psychologischen Zeitschriften zu replizieren. Bei weniger als der Hälfte der versuchten Replikationen war es gelungen, statistisch signifikante Ergebnisse in den erwarteten Richtungen zu erzielen, obwohl die meisten der versuchten Replikationen Trends in die erwarteten Richtungen hervorriefen.<ref>{{Cite journal | last1 = Open Science Collaboration | title = Estimating the reproducibility of Psychological Science | doi = 10.1126/science.aac4716 | journal = Science | volume = 349 | issue = 6251 | pages = aac4716 | year = 2015 | pmid=26315443| url = http://eprints.keele.ac.uk/877/1/Open%20Science%20%28Science%20Pre-Print%29.pdf | hdl = 10722/230596 }}</ref>

Viele Forschungsstudien und Metaanalysen werden durch schlechte Qualität und Interessenkonflikte beeinträchtigt, an denen sowohl Autoren als auch professionelle Interessenvertretungen beteiligt sind, was zu vielen falsch Positiven in Bezug auf die Wirksamkeit bestimmter Arten von Psychotherapie führt.<ref>{{cite web | url=http://blogs.plos.org/mindthebrain/2014/04/15/meta-analyses-conducted-professional-organizations-trustworthy/ | title=Are meta analyses conducted by professional organizations more trustworthy? | work=Mind the Brain | date=April 15, 2014 | accessdate=September 13, 2016 | first=James | last=Coyne}}</ref>

Obwohl die britische Zeitung ''The Independent'' schrieb, dass die Ergebnisse des Reproduzierbarkeitsprojektes zeigen, dass ein Großteil der veröffentlichten Forschung nur "Psycho-Gequatsche" ist,<ref>{{cite news| url=https://www.independent.co.uk/news/science/study-reveals-that-a-lot-of-psychology-research-really-is-just-psychobabble-10474646.html | location=London | work=The Independent | first=Steve | last=Connor | title=Study reveals that a lot of psychology research really is just 'psycho-babble' | date=27 August 2015}}</ref> bedeutet die Replikationskrise nicht unbedingt, dass Psychologie unwissenschaftlich ist.<ref>{{cite web|url=http://www.slate.com/articles/health_and_science/science/2014/07/replication_controversy_in_psychology_bullying_file_drawer_effect_blog_posts.single.html|title=Why Psychologists' Food Fight Matters|first1=Michelle N.|last1=Meyer|first2=Christopher|last2=Chabris|date=31 July 2014|via=Slate}}</ref><ref>{{cite web|url=http://fivethirtyeight.com/datalab/psychology-is-starting-to-deal-with-its-replication-problem/|title=Psychology Is Starting To Deal With Its Replication Problem|date=27 August 2015}}</ref><ref>{{cite web|url=http://fivethirtyeight.com/features/science-isnt-broken/|title=Science Isn't Broken|date=19 August 2015}}</ref> Vielmehr ist dieser Prozess ein gesunder, wenn auch manchmal bitterer Teil des wissenschaftlichen Prozesses, in dem alte Ideen oder solche, die einer sorgfältigen Prüfung nicht standhalten können, beschnitten werden,<ref>{{cite news|url=https://www.theguardian.com/science/head-quarters/2014/may/28/psychology-replication-drive-methods-bullying|title=Psychology's replication drive: it's not about you|first=Pete|last=Etchells|date=28 May 2014|newspaper=The Guardian}}</ref><ref>{{Cite journal|title = An Agenda for Purely Confirmatory Research|journal = Perspectives on Psychological Science|date = 2012-11-01|issn = 1745-6916|pmid = 26168122|pages = 632–638|volume = 7|issue = 6|doi = 10.1177/1745691612463078|first = Eric-Jan|last = Wagenmakers|first2 = Ruud|last2 = Wetzels|first3 = Denny|last3 = Borsboom|first4 = Han L. J. van der|last4 = Maas|first5 = Rogier A.|last5 = Kievit}}</ref> auch wenn dieser Stutzungsprozess nicht immer effektiv ist.<ref>{{Cite journal|title = Why Science Is Not Necessarily Self-Correcting|journal = Perspectives on Psychological Science|date = 2012-11-01|issn = 1745-6916|pmid = 26168125|pages = 645–654|volume = 7|issue = 6|doi = 10.1177/1745691612464056|first = John P. A.|last = Ioannidis}}</ref><ref>{{Cite journal|title = Is the Replicability Crisis Overblown? Three Arguments Examined|journal = Perspectives on Psychological Science|date = 2012-11-01|issn = 1745-6916|pmid = 26168109|pages = 531–536|volume = 7|issue = 6|doi = 10.1177/1745691612463401|first = Harold|last = Pashler|first2 = Christine R.|last2 = Harris}}</ref> Die Konsequenz ist, dass einige Bereiche der Psychologie, die einst als solide angesehen wurden, wie z.B. Social Priming, aufgrund gescheiterter Replikationen zunehmend unter die Lupe genommen werden.<ref>{{cite journal|url=http://chronicle.com/article/Power-of-Suggestion/136907/|title=Power of Suggestion|journal=The Chronicle of Higher Education|first=Tom|last=Bartlett|date=30 January 2013}}</ref>

Der Nobelpreisträger und emeritierte Professor für Psychologie Daniel Kahneman argumentierte, dass die Originalautoren an der Replikation beteiligt werden sollten, da die veröffentlichten Methoden oft zu vage sind.<ref name="Chambers">{{cite news|url=https://www.theguardian.com/science/head-quarters/2014/jun/10/physics-envy-do-hard-sciences-hold-the-solution-to-the-replication-crisis-in-psychology|title=Physics envy: Do 'hard' sciences hold the solution to the replication crisis in psychology?|first=Chris|last=Chambers|date=10 June 2014|newspaper=The Guardian}}</ref> Andere wie Dr. Andrew Wilson sind anderer Meinung und argumentieren, dass die Methoden im Detail beschrieben werden sollten.<ref name="Chambers" /> Eine Untersuchung der Replikationsraten in der Psychologie im Jahr 2012 ergab höhere Erfolgsraten in Replikationsstudien, wenn es zu Überschneidungen mit den Originalautoren einer Studie kam<ref name=":1">{{Cite journal|title = Replications in Psychology Research How Often Do They Really Occur?|journal = Perspectives on Psychological Science|date = 2012-11-01|issn = 1745-6916|pmid = 26168110|pages = 537–542|volume = 7|issue = 6|doi = 10.1177/1745691612460688|first = Matthew C.|last = Makel|first2 = Jonathan A.|last2 = Plucker|first3 = Boyd|last3 = Hegarty}}</ref> (91,7% erfolgreiche Replikationsraten in Studien mit Autorenüberschneidungen im Vergleich zu 64,6% erfolgreichen Replikationsraten ohne Autorenüberschneidungen).

==== Replikationsraten in der Psychologie====

Ein Bericht der [https://en.wikipedia.org/wiki/Center_for_Open_Science Open Science Collaboration] vom August 2015, der von [https://en.wikipedia.org/wiki/Brian_Nosek Brian Nosek] koordiniert wurde, schätzte die Reproduzierbarkeit von 100 psychologischen Studien aus drei hochrangigen psychologischen Zeitschriften.<ref>{{Cite journal|title = Estimating the reproducibility of psychological science|journal = Science|date = 2015-08-28|issn = 0036-8075|pmid = 26315443|pages = aac4716|volume = 349|issue = 6251|doi = 10.1126/science.aac4716|first = Open Science|last = Collaboration|url = http://eprints.keele.ac.uk/877/1/Open%20Science%20%28Science%20Pre-Print%29.pdf|hdl = 10722/230596}}</ref> Insgesamt lieferten 36% der Replikationen signifikante Ergebnisse (''p'' Wert unter 0,05) im Vergleich zu 97% der ursprünglichen Studien, die signifikante Effekte hatten. Die mittlere Effektgröße in den Replikationen war etwa halb so groß wie die in den Originalstudien berichteten Effekte.

Im gleichen Beitrag wurden die Reproduzierbarkeitsraten und Effektgrößen nach Zeitschriften untersucht (''Journal of Personality and Social Psychology''[JPSP], ''Journal of Experimental Psychology: Learning, Memory, and Cognition'' [JEP:LMC], ''Psychological Science'' [PSCI]) und nach Disziplinen (Sozialpsychologie, kognitive Psychologie). Die Replikationsraten der Studien lagen bei 23% für JPSP, 38% für JEP:LMC und 38% für PSCI. Studien im Bereich der kognitiven Psychologie hatten eine höhere Replikationsrate (50%) als Studien im Bereich der Sozialpsychologie (25%).

Eine Analyse der Publikationsgeschichte in den Top-100-Psychologiezeitschriften zwischen 1900 und 2012 ergab, dass etwa 1,6% aller psychologischen Publikationen Replikationsversuche waren.<ref name=":1" /> Artikel wurden als Replikationsversuch betrachtet, wenn der Begriff "Replikation" im Text erschien. Eine Teilmenge dieser Studien (500 Studien) wurde nach dem Zufallsprinzip für weitere Untersuchungen ausgewählt und ergab eine geringere Replikationsrate von 1,07% (342 der 500 Studien [68,4%] waren tatsächlich Replikationen). In der Teilmenge von 500 Studien zeigte die Analyse, dass 78,9% der veröffentlichten Replikationsversuche erfolgreich waren. Die Rate der erfolgreichen Replikation war signifikant höher, wenn mindestens ein Autor der Originalstudie Teil des Replikationsversuchs war (91,7% gegenüber 64,6%).

Eine 2018 in der Zeitschrift ''Nature Human Behaviour'' veröffentlichte Studie versuchte, 21 sozial- und verhaltenswissenschaftliche Arbeiten aus ''Nature'' und ''Science'' zu replizieren, wobei festgestellt wurde, dass nur 13 erfolgreich repliziert werden konnten.<ref>{{Cite news|url=https://www.wired.com/story/social-science-reproducibility|title=The Science Behind Social Science Gets Shaken Up—Again|work=WIRED|access-date=2018-08-28|language=en-US}}</ref><ref>{{cite journal |last1=Camerer |first1=Colin F. |authorlink1=Colin Camerer|last2=Dreber |first2=Anna |last3=Holzmeister |first3=Felix |last4=Ho |first4=Teck-Hua |last5=Huber |first5=Jürgen |last6=Johannesson |first6=Magnus |last7=Kirchler |first7=Michael |last8=Nave |first8=Gideon |last9=Nosek |first9=Brian A. |last10=Pfeiffer |first10=Thomas |last11=Altmejd |first11=Adam |last12=Buttrick |first12=Nick |last13=Chan |first13=Taizan |last14=Chen |first14=Yiling |last15=Forsell |first15=Eskil |last16=Gampa |first16=Anup |last17=Heikensten |first17=Emma |last18=Hummer |first18=Lily |last19=Imai |first19=Taisuke |last20=Isaksson |first20=Siri |last21=Manfredi |first21=Dylan |last22=Rose |first22=Julia |last23=Wagenmakers |first23=Eric-Jan |last24=Wu |first24=Hang |display-authors=2 |title=Evaluating the replicability of social science experiments in Nature and Science between 2010 and 2015 |journal=Nature Human Behaviour |date=27 August 2018 |volume=2 |issue=9 |pages=637–644 |doi=10.1038/s41562-018-0399-z|pmid=31346273 |url=https://authors.library.caltech.edu/91063/2/41562_2018_399_MOESM1_ESM.pdf }}</ref>  Ebenso in einer Studie, die unter der Schirmherrschaft des [https://en.wikipedia.org/wiki/Center_for_Open_Science Center for Open Science], ein Team von 186 Forschern aus 60 verschiedenen Labors (die 36 verschiedene Nationalitäten aus 6 verschiedenen Kontinenten repräsentieren), Replikationen von 28 klassischen und zeitgenössischen Erkenntnissen in der Psychologie durchführte.<ref name="Many Labs 2">{{cite journal |last1=Klein |first1=R.A. |title=Many Labs 2: Investigating Variation in Replicability Across Samples and Settings |journal=Advances in Methods and Practices in Psychological Science |date=2018 |volume=1 |issue=4 |pages=443–490 |doi=10.1177/2515245918810225 }}</ref> Der Fokus der Studie lag nicht nur darauf, ob die Ergebnisse aus den Originalarbeiten repliziert wurden oder nicht, sondern auch darauf, inwieweit die Ergebnisse in Abhängigkeit von Variationen in Proben und Kontexten variierten. Insgesamt konnten 14 der 28 Befunde trotz erheblicher Stichprobengröße nicht repliziert werden. Wenn ein Befund jedoch repliziert wurde, wurde er in den meisten Stichproben repliziert, während er, wenn er nicht repliziert wurde, mit geringer Variation zwischen Stichproben und Kontexten nicht repliziert werden konnte. Dieser Nachweis steht im Widerspruch zu einer populären Erklärung, dass Versäumnisse bei der Replikation in der Psychologie wahrscheinlich auf Änderungen in der Stichprobe zwischen Original- und Replikationsstudie zurückzuführen sind.<ref name="Witkowski">{{cite journal |last1=Witkowski |first1=Tomasz |title=Is the glass half empty or half full? Latest results in the replication crisis in Psychology |journal=Skeptical Inquirer |date=2019 |volume=43 |issue=2 |pages=5–6}}</ref>

==== Ein soziales Dilemma der ganzen Disziplin====

Im Versuch, die soziale Struktur herauszuarbeiten, die die Replikation in der Psychologie verhindert, zählten Brian D. Earp und Jim A. C. Everett fünf Punkte auf, warum Replikationsversuche ungewöhnlich sind:<ref>See also [http://journal.frontiersin.org/article/10.3389/fpsyg.2015.00621/abstract Earp and Trafimow], 2015</ref><ref name="Everett 1152">{{Cite journal|title = A tragedy of the (academic) commons: interpreting the replication crisis in psychology as a social dilemma for early-career researchers|journal = Frontiers in Psychology|date = 2015-01-01|pmc = 4527093|pmid = 26300832|pages = 1152|doi = 10.3389/fpsyg.2015.01152|first = Jim Albert Charlton|last = Everett|first2 = Brian D.|last2 = Earp|volume=6}}</ref>

"#Unabhängige, direkte Replikationen der Ergebnisse anderer können für den replizierenden Forscher zeitaufwendig sein. 
#"[Replikationen] werden wahrscheinlich Energie und Ressourcen direkt von anderen Projekten abziehen, die das eigene ursprüngliche Denken widerspiegeln. 
#"[Replikationen] sind im Allgemeinen schwieriger zu veröffentlichen (größtenteils, weil sie als unoriginell angesehen werden). 
#"Selbst wenn [Replikationen] veröffentlicht werden, werden sie wahrscheinlich als "Maurerarbeiten" angesehen, und nicht als wichtige Beiträge zum Thema. 
#"[Replikationen] bringen ihren Autoren weniger Anerkennung und Belohnung und sogar weniger grundlegende Karrieresicherheit"<ref name=":3">{{Cite web|title = Resolving the replication crisis in social psychology? A new proposal|url = http://www.spsp.org/blog/resolving-replication-crisis-social-psychology|publisher=Society for Personality and Social Psychology|accessdate = 2015-11-18}}</ref> 

Aus diesen Gründen halten die Autoren dafür, dass sich die Psychologie als Disziplin in einem sozialen Dilemma befindet, in dem die Interessen der Disziplin im Widerspruch zu den Interessen des einzelnen Forschers stehen.

=== Medizin ===

Medizinische Forscher gehörten zu den ersten, die Alarm schlugen, als es um die mangelnde Reproduzierbarkeit von vorklinischen Studien zu Arzneimitteln ging, die für den industriellen Einsatz bestimmt waren.<ref>[https://www.nature.com/articles/nrd3439-c1 Believe it or not: how much can we rely on published data on potential drug targets?] by Florian Prinz, Thomas Schlange & Khusru Asadullah, in: Nature Reviews Drug Discovery volume10, page712 (2011)</ref> Dieser Mangel an Reproduzierbarkeit und damit an Zuverlässigkeit in der Forschung begann für Pharmaunternehmen zu einem wachsenden Problem zu werden, da ihre Entscheidungen, in welche Arzneimittelziele sie Geld für teure klinische Forschung investieren wollen, hauptsächlich von solchen Studien abhängen.

Von 49 medizinischen Studien von 1990-2003, mit mehr als 1000 Zitierungen, behaupteten 45, dass die studierte Therapie wirksam sei. Von diesen Studien wurden 16% durch Folgestudien widerlegt, 16% hatten stärkere Effekte gefunden als Folgestudien, 44% wurden repliziert, und 24% blieben weitgehend unangefochten.<ref>{{cite journal|title=Contradicted and initially stronger effects in highly cited clinical research|last=Ioannidis JA|date=13 July 2005|journal=JAMA|volume=294|issue=2|pages=218–228|doi=10.1001/jama.294.2.218|pmid=16014596}}</ref> Die US Food and Drug Administration fand in den Jahren 1977-1990 Fehler in 10-20% der medizinischen Studien.<ref>{{cite journal|title=Scientific data audit—A key management tool|first=J. Leslie|last=Glick|date=1 January 1992|volume=2|issue=3|pages=153–168|doi=10.1080/08989629208573811|journal=Accountability in Research}}</ref> In einer 2012 veröffentlichten Arbeit stellten Glenn Begley, ein Biotech-Berater, der bei Amgen arbeitet, und Lee Ellis von der University of Texas fest, dass nur 11% der vorklinischen Krebsstudien repliziert werden könnten.<ref name="Begley-Lee2012">{{Cite journal|last1=Begley |first1=C. G. |last2=Ellis |first2=L. M. |year=2012 |title=Drug Development: Raise Standards for Preclinical Cancer Research |journal=Nature |volume=483 |issue=7391 |pages=531–533|doi=10.1038/483531a |pmid=22460880 |bibcode=2012Natur.483..531B }}</ref><ref name="Begley2013">{{Cite journal|last=Begley |first=C. G. |year=2013 |title=Reproducibility: Six red flags for suspect work |journal=Nature |volume=497 |issue=7450 |pages=433–434|doi=10.1038/497433a |bibcode=2013Natur.497..433B }}</ref>

Ein Artikel von[https://en.wikipedia.org/wiki/John_Ioannidis John Ioannidis], Professor für Medizin und Gesundheitsforschung und -politik an der Stanford University School of Medicine und Professor für Statistik an der Stanford University School of Humanities and Sciences, ging 2016 darauf ein , „warum die meiste klinische Forschung nichts nützt“ ("Why Most Clinical Research Is Not Useful")".<ref name="Ioannidis2016">{{cite journal | last1 = Ioannidis | first1 = JPA | year = 2016 | title = Why Most Clinical Research Is Not Useful | journal = PLoS Med | volume = 13 | issue = 6| page = e1002049 | doi = 10.1371/journal.pmed.1002049 | pmid = 27328301 | pmc = 4915619 }}</ref> Im Artikel legte Ioannidis einige der Probleme dar und forderte eine Reform mit bestimmten Charakteristika, damit die medizinische Forschung wieder nützlich sei; ein Beispiel dafür war die Notwendigkeit, dass die Medizin "patientenzentriert" sein müsse (z.B. in Form des Patient-Centered Outcomes Research Institute) anstelle der derzeitigen Praxis, sich hauptsächlich um "die Bedürfnisse von Ärzten, Forschern oder Sponsoren" zu kümmern. Ioannidis ist seit der 2005 erschienenen Arbeit "Why Most Published Research Findings Are False"<ref>{{cite journal|title=Why Most Published Research Findings Are False|journal=[[PLoS Medicine]]|date=August 1, 2005|issn=1549-1277|pmc=1182327|pmid=16060722|volume=2|issue=8|doi=10.1371/journal.pmed.0020124|first=John P. A.|last=Ioannidis|pages=e124}}</ref> bekannt für seinen Forschungsschwerpunkt auf der Wissenschaft selbst.

=== Marketing ===

Marketing ist eine weitere Disziplin mit einem "dringenden Bedarf" an Replikation.<ref>{{Cite journal|title = The desperate need for replications|journal = Journal of Consumer Research|date = 2001-06-01|pages = 149–158|volume = 28|issue = 1|doi = 10.1086/321953|first = John E.|last = Hunter}}</ref> Viele berühmte Marketingstudien können beim Replikationsversuch nicht wiederholt werden, ein bemerkenswertes Beispiel ist der "too-many-choices"-Effekt, bei dem eine hohe Anzahl von Produktwahlen die Kaufwahrscheinlichkeit für einen Verbraucher verringern soll.<ref>{{Cite journal|last=Armstrong|first=J. S.|last2=Green|first2=Kesten|date=30 January 2017|title=Guidelines for Science: Evidence and Checklists|url=http://repository.upenn.edu/cgi/viewcontent.cgi?article=1258&context=marketing_papers|journal=Working Paper|volume=|pages=|via=}}</ref> 
Zusätzlich zu den oben genannten Argumenten sind Replikationsstudien im Marketing erforderlich, um die Anwendbarkeit von Theorien und Modellen über Länder und Kulturen hinweg zu untersuchen, was aufgrund möglicher Einflüsse der Globalisierung besonders wichtig ist.<ref>{{Cite journal|title = Effects of Subcultural Differences on Country and Product Evaluations: A Replication Study|journal = Journal of Global Marketing|date = 2016-03-22|pages = 115–127|volume = 29|issue = 3|doi = 10.1080/08911762.2015.1138012|first1 = Thomas|last1 = Aichner|first2 = Paolo|last2 = Coletti|first3 = Cipriano|last3 = Forza|first4 = Urban|last4 = Perkmann|first5 = Alessio|last5 = Trentin}}</ref>

=== Wirtschaftswissenschaften ===

Eine Studie aus dem Jahr 2016 in der Zeitschrift ''Science'' ergab, dass ein Drittel von 18 experimentellen Studien aus zwei hochrangigen Wirtschaftszeitschriften (''American Economic Review'' und dem ''Quarterly Journal of Economics'') nicht erfolgreich repliziert werden konnte.<ref>{{Cite journal|last=Camerer|first=Colin F.|last2=Dreber|first2=Anna|last3=Forsell|first3=Eskil|last4=Ho|first4=Teck-Hua|last5=Huber|first5=Jürgen|last6=Johannesson|first6=Magnus|last7=Kirchler|first7=Michael|last8=Almenberg|first8=Johan|last9=Altmejd|first9=Adam|date=2016-03-25|title=Evaluating replicability of laboratory experiments in economics|journal=Science|language=en|volume=351|issue=6280|pages=1433–1436|doi=10.1126/science.aaf0918|issn=0036-8075|pmid=26940865|bibcode=2016Sci...351.1433C}}</ref><ref>{{Cite news|url=http://www.sciencemag.org/news/2016/03/about-40-economics-experiments-fail-replication-survey|title=About 40% of economics experiments fail replication survey|date=2016-03-03|work=Science |access-date=2017-10-25|language=en}}</ref> Eine Studie aus dem Jahr 2017 im ''Economic Journal'' schlug vor, dass "die Mehrheit der durchschnittlichen Effekte in der empirischen Wirtschaftsliteratur um den Faktor 2 und mindestens ein Drittel um den Faktor 4 oder mehr übertrieben sind".<ref>{{Cite journal|last=Ioannidis|first=John P. A.|last2=Stanley|first2=T. D.|last3=Doucouliagos|first3=Hristos|date=2017-10-01|title=The Power of Bias in Economics Research|journal=The Economic Journal|language=en|volume=127|issue=605|pages=F236–F265|doi=10.1111/ecoj.12461|issn=1468-0297}}</ref>

=== Sportwissenschaften ===

Eine Studie aus dem Jahr 2018 stellte das Gebiet der Bewegungs- und Sportwissenschaften vor die Aufgabe, unzureichende Replikationsstudien, begrenzte Berichterstattung über Nullergebnisse und triviale Ergebnisse sowie unzureichende Forschungstransparenz zu liefern.<ref>{{Cite journal|last=Halperin|first=Israel|last2=Vigotsky|first2=Andrew D.|last3=Foster|first3=Carl|last4=Pyne|first4=David B.|date=2018-02-01|title=Strengthening the Practice of Exercise and Sport-Science Research|journal=International Journal of Sports Physiology and Performance|volume=13|issue=2|pages=127–134|doi=10.1123/ijspp.2017-0322|issn=1555-0273|pmid=28787228}}</ref> Statistiker haben die Sportwissenschaft für die allgemeine Anwendung einer umstrittenen statistischen Methode namens "magnitude-based inference" kritisiert, die es Sportwissenschaftlern ermöglicht hat, scheinbar signifikante Ergebnisse aus dem Datenrauschen zu extrahieren, wo normale Hypothesentests keine gefunden hätten.<ref>{{Cite news|url=https://fivethirtyeight.com/features/how-shoddy-statistics-found-a-home-in-sports-research/|title=How Shoddy Statistics Found A Home In Sports Research|date=2018-05-16|work=FiveThirtyEight|access-date=2018-05-16|language=en-US}}</ref>

=== Hydrologie ===

Eine Studie aus dem Jahr 2019 in der Zeitschrift "Scientific Data" ergab, dass nur eine kleine Anzahl von Artikeln in Zeitschriften für Hydrologie und Wasserressourcen aufgrund der Nichtverfügbarkeit von Daten reproduziert werden können. Die Studie "schätzte mit 95%iger Sicherheit, dass die Ergebnisse nur für 0,6% bis 6,8% aller 1.989 Artikel reproduziert werden können".<ref>{{Cite journal|last=Stagge|first=James H.|last2=Rosenberg|first2=David E.|last3=Abdallah|first3=Adel M.|last4=Akbar|first4=Hadia|last5=Attallah|first5=Nour A.|last6=James|first6=Ryan|date=2019-02-26|title=Assessing data availability and research reproducibility in hydrology and water resources|journal=Scientific Data|language=en|volume=6|pages=190030|doi=10.1038/sdata.2019.30|pmid=30806638|pmc=6390703|issn=2052-4463|bibcode=2019NatSD...690030S}}</ref><ref>[https://www.nature.com/articles/sdata201930#f2 https://www.nature.com/articles/sdata201930#f2]</ref><ref>[https://replicationnetwork.com/2019/03/01/surveying-reproducibility/ https://replicationnetwork.com/2019/03/01/surveying-reproducibility/]</ref><br/> Diese Studie bezieht sich vor allem auf die Qualität der Dokumentation von origninalem Material, die offensichtlich nur wenig oder gar nicht gegeben ist. Da keine Rohdaten vorliegen, kann die faktische Validität der wissenschaftlichen Artikel nicht abgeschätzt werden, aber die wissenschaftliche Nicht-Reproduzierbarkeit ist damit nicht nachgewiesen.

=== Exakte Wissenschaften ===

Im Gegensatz zu den Sozial- und Biowissenschaften würden die meisten davon ausgehen, dass die "exakten Wissenschaften" – Physik, Chemie, Biologie, Astronomie, etc. – von dieser Krise nicht betroffen seien. Dennoch scheint es dort auch einige Probleme zu geben. "Sogar die Physik ist betroffen, wie William Wilson feststellt. "Zwei der am meisten gepriesenen physikalischen Ergebnisse der letzten Jahre – die angekündigte Entdeckung sowohl der kosmischen Inflation als auch der Gravitationswellen beim BICEP2-Experiment in der Antarktis und die vermeintliche Entdeckung von superluminalen Neutrinos an der schweizerisch-italienischen Grenze – wurden nun zurückgezogen, und das mit weitaus weniger Fanfare als bei ihrer ersten Veröffentlichung." Siehe [http://phys.org/news/2015-02-cosmic-inflation-bicep2-results.html dies über das erstere] und [http://press.cern/press-releases/2011/09/opera-experiment-reports-anomaly-flight-time-neutrinos-cern-gran-sasso dies über das letztere].”<ref>[ https://fabiusmaximus.com/2016/04/19/replication-crisis-in-science-95394/ The replication crisis in science has just begun. It will be big.] by Larry Kummer, Editor Science & Nature 19 April 2016 on Fabius Maximus website, here referring to W.Wilson – Scientific Regress (siehe unter weiterführender Literatur unten)</ref>

=== Naturkonstanten ===

Eine der Säulen der Physik und aller Wissenschaften, die auf den in der Physik beschriebenen Gesetzen basieren, ist die Annahme einer Beständigkeit der Naturkonstanten. Diese Konstanz ist eine allgemeine Annahme, da sie grundsätzlich nicht nachgewiesen werden kann. Man kann nur sagen, dass sie einigermaßen konstant waren, solange der Mensch sie messen kann, was im Vergleich zum Alter des Universums eine extrem kurze Zeitspanne ist.<br/> Dennoch gibt es guten Grund, selbst an dieser Grundannahme der Physik zu zweifeln: "Ende 1998 hat die CODATA sogar beschlossen, die Unsicherheit des akzeptierten Wertes für die Gravitationskonstante von 128 ppm auf 1500 ppm zu erhöhen. Dieser bemerkenswerte Schritt, die Unsicherheit zu erhöhen, anstatt sie zu verringern, wurde unternommen, um die Diskrepanzen zwischen den jüngsten Experimenten wiederzuspiegeln, die einen weiten Bereich von mehr als 0,7 % umfassen."<ref>Ulf Kleinevoß: Bestimmung der Newtonschen Gravitationskonstanten, Dissertation Januar 2002, Wuppertal, S.1, Abstract; 
[http://elpub.bib.uni-wuppertal.de/edocs/dokumente/fb08/diss2002/kleinevoss/d080201.pdf]</ref><br/> Und in seiner Arbeit "The Science Delusion - Freeing the Spirit of Enquiry" diskutiert der Biologe und Philosoph [[Rupert_Sheldrake|Rupert Sheldrake]]<ref>Rupert Sheldrake: The Science Delusion - Freeing the Spirit of Enquiry; London 2012, Hodder& Stoughton, ISBN 978 1 444 72795 1 Kapitel 3: Are the Laws of Nature Fixed?</ref> dieses Problem und gibt viele Beispiele dafür, dass die fundamentalen Konstanten nicht so ewig sein können, wie gedacht, sondern sich mit der Zeit ändern. Er sieht die "Konstanten" eher als Gewohnheiten der Natur denn als ewige Gesetze. Sheldrake weist darauf hin, dass die grundlegenden physikalischen Konstanten künstlich als konstant gehalten werden, indem man sie so definiert, alle Messungen auf den Mittelwert reduziert und stark abweichende Messungen von der Zählung eliminiert. Tatsächlich liefern wissenschaftliche Messungen der Konstanten ständig ganz unterschiedliche Ergebnisse, die vom ''Committee on Data for Science and Technology'' ([https://howlingpixel.com/i-de/CODATA CODATA]) gesammelt und normiert werden, um per Definition immer konstant zu bleiben.<ref>[https://howlingpixel.com/i-de/Physikalische_Konstante] und Sheldrake, Science Delusion</ref>.

== Ursachen der Krise ==

=== Schlechte Wissenschaft ===

Die [https://en.wikipedia.org/wiki/Sokal_affair Sokal-Affäre] und die anschließende Diskussion haben deutlich gezeigt, dass es ein großes Problem gibt, nicht zwischen echter und gefälschter Wissenschaft zu unterscheiden.<ref>Peter Boghossian, Ed.D. (aka Peter Boyle, Ed.D.), James Lindsay, Ph.D. (aka, Jamie Lindsay, Ph.D.): Der konzeptuelle Penis als soziales Konstrukt: Ein Sokal-Stil-Hokuspokus über Geschlechterforschung. SKEPTIC, 19.05.2017. [http://www.skeptic.com/reading_room/conceptual-penis-social-contruct-sokal-style-hoax-o]; Alexander Durin: Fehler im System mancher Wissenschaften. Telepolis, Heise, 02.03.2014. (https://www.heise.de/tp/features/Fehler-im-System-mancher-Wissenschaften-3502557.html); Alan D. Sokal: Die Grenzen überschreiten: Auf dem Weg zu einer transformativen Hermeneutik der Quantengravitation. Sozialtext 46/47:217-252, 1996. [http://www.physics.nyu.edu/faculty/sokal/transgress_v2/transgress_v2_singlefile.html].</ref><br/> Der Chefredakteur der renommierten medizinischen Zeitschrift ''Lancet''<ref>Richard Horton - Offline: Was ist das 5-Sigma der Medizin? In: Die Lanzette VOLUME 385, Ausgabe 9976, P1380, 11. APRIL, 2015; 
[https://www.thelancet.com/journals/lancet/article/PIIS0140-6736(15)60696-1/fulltext]</ref> Richard Horton schreibt über "scheinbare Endemie schlechten Forschungsverhaltens" und "schlechte wissenschaftliche Praktiken", wenn er darauf hinweist, dass "ein Großteil der wissenschaftlichen Literatur, vielleicht die Hälfte, einfach unwahr sein kann". Als Herausgeber der wohl wichtigsten medizinischen Fachzeitschrift ist er in der Lage, das Problem zu erkennen.

=== Hohe Publikationsraten ===

Tatsächlich lassen sich einige Vorhersagen über eine mögliche Krise des Qualitätskontrollmechanismus der Wissenschaften mehrere Jahrzehnte zurückverfolgen, insbesondere unter Wissenschaftlern der Naturwissenschaften und Technik (STS). Derek de Solla Price - als Vater der "Scientometrics" - prognostizierte, dass die Wissenschaft durch ihr eigenes exponentielles Wachstum "Senilität" erreichen könnte.<ref name="DeSollaPrice1963">{{cite book|author1=De Solla Price|author2=Derek J.|year=1963|title=Little science big science|publisher=Columbia University Press}}</ref> Einiges in der heutigen Literatur scheint diese "overflow"-Prophezeiung zu rechtfertigen und beklagt den Verfall sowohl in Aufmerksamkeit als auch in Qualität ref name="Siebert-al2015">{{cite journal|author1=Siebert, S.|author2=Machesky, L. M.|author3=Insall, R. H.|lastauthoramp=y|year=2015|title=Overflow in science and its implications for trust|journal=eLife|volume=4|page=e10825|doi=10.7554/eLife.10825|pmid=26365552|pmc=4563216}}</ref><ref name="Della-Briotta-al2015">{{cite journal|author1=Della Briotta Parolo, P.|author2=Kumar Pan|author3=R. Ghosh|author4=R. Huberman|author5=B.A. Kimmo Kaski|author6=Fortunato, S.|year=2015|title=Attention decay in science|journal=Journal of Informetrics|volume=9|issue=4|pages=734–745|doi=10.1016/j.joi.2015.07.006|arxiv=1503.01881|bibcode=2015arXiv150301881D}}</ref>

Der Philosoph und Wissenschaftshistoriker Jerome R. Ravetz prophezeite in seinem Buch ''[https://en.wikipedia.org/wiki/Scientific_Knowledge_and_Its_Social_Problems Scientific Knowledge and Its Social Problems]'', dass die Wissenschaft – beim Übergang von der kleinen Wissenschaft aus begrenzten Gemeinschaften von Wissenschaftlern zu großen Wissenschaften oder Techno-Wissenschaften – große Probleme in ihrem internen System der Qualitätskontrolle erleiden würde. Ravetz erwartete, dass das System der modernen Wissenschaft zur Belohnung von Wissenschaftlern für die Forschung dysfunktional werden könnte, mit der gegenwärtigen Herausforderung des "Publish or Perish" umzugehen, was perverse Anreize zur Veröffentlichung von so zweifelhaften Ergebnissen schaffen könnte. Für Ravetz bleibt die Qualität in der Wissenschaft erhalten, wenn es eine Gemeinschaft von Wissenschaftlern gibt, die durch Normen und Standards verbunden sind, und die Bereitschaft, zu diesen zu stehen.

Der Historiker Philip Mirowski hat in jüngster Zeit in seinem Buch ''Science Mart'' (2011) eine ähnliche Diagnose gestellt).<ref name="Mirowski">{{cite book|author=Mirowski, P.|year=2011|title=Science-Mart: Privatizing American Science|publisher=Harvard University Press}}</ref> 'Mart' ist hier ein Hinweis auf den Handelsriesen ''Walmart'' und eine Anspielung auf die Vermarktung der Wissenschaft. In der Analyse von Mirowski bricht die Qualität der Wissenschaft zusammen, wenn sie zu einer auf einem Markt gehandelten Ware wird. Mirowski begründet dies, indem er den Niedergang der Wissenschaft auf die Entscheidung der Großunternehmen zurückführt, ihre hauseigenen Labors zu schließen und ihre Arbeit an Universitäten auszulagern, und anschließend ihre Forschung von den Universitäten auf noch billigere Auftragsforschungsinstitute (CRO) zu verlagern.

=== Unzureichende Kontrolle ===

Die Krise des Qualitätssicherungssystems der Wissenschaft wirkt sich auf die Nutzung der Wissenschaft für die Politik aus. Dies ist die These einer aktuellen Arbeit einer Gruppe von STS-Wissenschaftlern, die in der "evidenzbasierten (oder -informierten) Politik" einen Punkt der gegenwärtigen Spannung identifizieren.<ref name="FUTURES1">{{Cite journal|last1=Saltelli |first1=A. |last2=Funtowicz |first2=S. |year=2017 |title=What is science's crisis really about? |journal=Futures |volume=91 |pages=5–11 |doi=10.1016/j.futures.2017.05.010}}</ref><ref name="Benessia-al2016">{{Cite book|last1=Benessia |first1=A. |last2=Funtowicz |first2=S. |last3=Giampietro |first3=M. |last4=Guimarães Pereira |first4=A. |last5=Ravetz |first5=J. |last6=Saltelli |first6=A. |last7=Strand |first7=R. |last8=van der Sluijs |first8=J. |year=2016 |title=The Rightful Place of Science: Science on the Verge |publisher=Consortium for Science, Policy and Outcomes at Arizona State University|title-link=The Rightful Place of Science: Science on the Verge }}</ref><ref name="Letter">{{cite magazine|first1=Andrea |last1=Saltelli|first2=Jerome R. |last2=Ravetz|first3=Silvio |last3=Funtowicz|lastauthoramp=y|url=https://www.newscientist.com/letter/mg23030791-600-7-a-new-community-for-science/|title=A new community for science|magazine=New Scientist|issue=3079|p=52|date=25 June 2016}}</ref><ref name="FUTURES2" /> Der WIrtschaftswissenschaftler Noah Smith schlägt vor, dass ein Faktor in der Krise die Überbewertung der Forschung in der Wissenschaft und die Unterbewertung der Lehrkapazitäten war, insbesondere in Bereichen mit wenigen großen jüngsten Entdeckungen.<ref name="Academic signaling and the post-truth world">{{cite web|last1=Smith|first1=Noah|title=Academic signaling and the post-truth world|url=http://noahpinionblog.blogspot.co.uk/2016/12/academic-signaling-and-post-truth-world.html|website=Noahpinion|publisher=Stony Brook University|accessdate=5 November 2017|date=2016-12-14}}</ref> Der Autor John Bohannon erklärt in seinem Artikel “Who’s Afraid of Peer Review?”<ref> [https://science.sciencemag.org/content/342/6154/60.full John Bohannon: Who’s Afraid of Peer Review?], Science  04 Oct 2013: Vol. 342, Issue 6154, pp. 60-65;  DOI: 10.1126/science.342.6154.60</ref> in der „Science“ das Problem der wachsenden Zahl von Open-Access-Zeitschriften und des Fehlens eines effektiven Peer Reviews. Von 300 gefälschten Artikeln, die mit offensichtlichen Fehlern und Unsinn gefüllt waren und an ebenso viele verschiedene Online-Zeitschriften verschickt wurden, wurde mehr als die Hälfte ohne angemessene Kritik akzeptiert.

=== „Publication bias” ===

Eine weitere Hauptursache ist der sogenannte „Publication bias”, also die Tatsache, dass positive Ergebnisse eher veröffentlicht werden als negative (oder null) Ergebnisse. Dies kann zur Kanonisierung falscher Annahmen als Fakten führen <ref>{{cite journal |last1 = Nissen |first1 = Silas Boye |last2 = Magidson| first2 = Tali| last3 = Gross| first3 = Kevin | last4 = Bergstrom| first4 = Carl |title=Research: Publication bias and the canonization of false facts |journal=eLife |date=December 20, 2016 |volume=5 |pages=e21451 |url= https://elifesciences.org/articles/21451 |accessdate=9 June 2019 |doi=10.7554/eLife.21451 |arxiv= 1609.00494 }}</ref>.

=== Grundlegende Ursachen im wissenschaftlichen Paradigma ===

Alle oben genannten Gründe für die mangelnde Reproduzierbarkeit haben eines gemeinsam: Sie sind Folgen von menschlichem Verschulden, Fehlverhalten oder Fehlern und könnten theoretisch durch Disziplin, Korrektheit und bessere Kontrolle korrigiert werden. </br>Dennoch bleibt die Möglichkeit bestehen, dass es – abgesehen von all diesen Überlegungen und Beobachtungen, die an sich richtig sind, – auch grundlegendere Probleme des Axioms der Wiederholbarkeit und der Konstanz der Natur als solcher geben könnte. Der Biologe, Philosoph und Wissenschaftstheoretiker [[Rupert_Sheldrake|Rupert Sheldrake]] hat darauf hingewiesen, dass es reichlich Grund gibt, den Glauben an die volle Replizierbarkeit und Zuverlässigkeit auch der exakten Wissenschaften zu bezweifeln und dass es ein Problem mit der Annahme der Replizierbarkeit als solcher geben könnte.<ref>Rupert Sheldrake: [https://www.sheldrake.org/essays/how-the-universal-gravitational-constant-varies?highlight=WyJwaHlzaWNhbCIsImNvbnN0YW50cyIsInBoeXNpY2FsIGNvbnN0YW50cyJd How the Universal Gravitational Constant Varies]; 
[https://www.sheldrake.org/essays/the-replicability-crisis-in-science The Replicability Crisis in Science];  
Science Set Free: 10 Paths to New Discovery, ISBN-13: 978-0770436704, Publ. Deepak Chopra; 1st ed. (4. September 2012); The Science Delusion, ISBN-13: 978-1444727944, Publisher: Coronet (6 Dec. 2012) </ref>

Auf jeden Fall deutet der [[Decline_Effect|Decline effect (siehe Hauptartikel)]] auf allgemeine Probleme der Replizierbarkeit hin, da dieser durch die bisher vorgeschlagenen Ursachen nicht vollständig erklärt werden kann. Er wurde von J.B.Rhine in den 20er Jahren des letzten Jahrhunderts entdeckt, lange vor der aktuellen Krise und unter völlig anderen Umständen. Rhine fand die Wirkung in seiner eigenen Forschung, auch in Bereichen, deren statistische Validität er selbst zuvor überprüft hatte.

== Die öffentliche Reaktion  ==

=== Politische Auswirkungen ===

In den USA ist die Reproduzierbarkeitskrise der Wissenschaft in Verbindung mit dem Versuch, die Vorschriften – z.B. die Schadstoffemissionen – zu verringern, zu einem politischen Streitpunkt geworden, mit dem Argument, dass diese Vorschriften auf nicht reproduzierbarer Wissenschaft beruhen würden.<ref name="Oreskes">{{Cite journal |last=Oreskes |first=N. |year=2018 |title=Beware: Transparency rule is a trojan horse |journal=Nature |volume=557 |issue=7706 |page=469 |doi=10.1038/d41586-018-05207-9|pmid=29789751 |bibcode=2018Natur.557..469O }}</ref><ref name="FUTURES2">{{cite journal |last1=Andrea |first1=Saltelli |title=Why science's crisis should not become a political battling ground |journal=Futures |date=December 2018 |volume=104 |pages=85–90 |doi=10.1016/j.futures.2018.07.006}}</ref> Frühere Versuche mit dem gleichen Ziel beschuldigten Studien, intransparent zu sein.<ref name="Michaels">{{Cite book|first=D. |last=Michaels |title=Doubt is their product: How industry's assault on science threatens your health |publisher=Oxford University Press |year=2008}}</ref>

=== Öffentliche Diskussion ===

Abgesehen von Studien und Artikeln in wissenschaftlichen Zeitschriften gab es bisher wenig öffentliche Diskussionen über die Replikationskrise und nur wenige Berichte in den Massenmedien. Die meisten Diskussionen beziehen sich nur auf statistische, ökonomische und soziologische Gründe.<ref>Siehe die gesamte zitierte Literatur.</ref><br/> Die Frage, ob hinter diesen Erkenntnissen auch ein allgemeines Problem der Replizierbarkeit steckt, ist bisher noch nicht angegangen worden. Und es gab sehr wenig Anstrengungen in den exakten Wissenschaften, sich mit dem Problem der Replikation zu befassen, da es einen Konsens zu geben scheint, dass das Problem nur eines der Sozial- und Biowissenschaften sei.

== Umgang mit der Replikationskrise ==

Die Replikation wurde als "der Eckpfeiler der Wissenschaft" bezeichnet".<ref>{{Cite journal|title = Most Published Research Findings Are False—But a Little Replication Goes a Long Way|journal = PLoS Med|date = 2007-02-27|pmc = 1808082|pmid = 17326704|pages = e28|volume = 4|issue = 2|doi = 10.1371/journal.pmed.0040028|first = Ramal|last = Moonesinghe|first2 = Muin J.|last2 = Khoury|first3 = A. Cecile J. W.|last3 = Janssens}}</ref><ref>{{Cite journal|title = The Value of Direct Replication|journal = Perspectives on Psychological Science|date = 2014-01-01|issn = 1745-6916|pmid = 26173243|pages = 76–80|volume = 9|issue = 1|doi = 10.1177/1745691613514755|first = Daniel J.|last = Simons}}</ref> Replikationsstudien versuchen zu bewerten, ob die veröffentlichten Ergebnisse wahre Ergebnisse oder Falschpositive widerspiegeln. Die Integrität der wissenschaftlichen Erkenntnisse und die Reproduzierbarkeit der Forschung sind wichtig, da sie die Wissensgrundlage bilden, auf der zukünftige Studien aufbauen.

===Wissenschaftstheorie===

Wissenschaftstheorie ist die Verwendung wissenschaftlicher Methoden, um die Wissenschaft selbst zu untersuchen. Wissenschaftstheorie ist bestrebt, die Qualität der wissenschaftlichen Forschung zu verbessern und gleichzeitig die Verschwendung zu reduzieren. Sie wird auch als "Forschungsforschung" und "Wissenschaft der Wissenschaft" bezeichnet, da sie mit Forschungsmethoden untersucht, wie die Forschung durchgeführt wird und wo Verbesserungen vorgenommen werden können. Wissenschaftstheorie beschäftigt sich mit allen Forschungsbereichen und wurde als " Wissenschaft aus der Vogelperspektive" bezeichnet.<ref>{{Cite journal| doi = 10.1371/journal.pbio.1002264| pmid = 26431313| pmc = 4592065| issn = 1545-7885| volume = 13| issue = 10| pages = –1002264| last1 = Ioannidis| first1 = John P. A.| last2 = Fanelli| first2 = Daniele| last3 = Dunne| first3 = Debbie Drake| last4 = Goodman| first4 = Steven N.| title = Meta-research: Evaluation and Improvement of Research Methods and Practices| journal = PLOS Biology| date = 2015-10-02}}</ref> Mit den Worten von John Ioannidis: "Wissenschaft ist das Beste, was dem Menschen passiert ist.... aber wir können es besser machen."<ref>{{cite web |last1=Bach |first1=Author Becky |title=On communicating science and uncertainty: A podcast with John Ioannidis |url=https://scopeblog.stanford.edu/2015/12/08/on-communicating-science-and-uncertainty-a-podcast-with-john-ioannidis/ |website=Scope |accessdate=20 May 2019 |date=8 December 2015}}</ref>

Es wird weiterhin Wissenschaftstheorie und Forschung an der Wissenschaft selbst betrieben, um die Ursachen der Krise zu identifizieren und anzugehen. Zu den Methoden zur Bewältigung der Krise gehören die Vorregistrierung von wissenschaftlichen Studien und klinischen Studien sowie die Gründung von Organisationen wie CONSORT und dem EQUATOR Network, die Richtlinien für Methodik und Berichterstattung herausgeben. Es werden weitere Anstrengungen unternommen, um das System der akademischen Anreize zu reformieren, den Peer-Review-Prozess zu verbessern, den Missbrauch von Statistiken zu verringern, Verzerrungen in der wissenschaftlichen Literatur zu bekämpfen und die Gesamtqualität und Effizienz des wissenschaftlichen Prozesses zu erhöhen.

====Bekämpfung von „Publication bias” mit Vorregistrierung von Studien ====

Eine jüngste Innovation in der wissenschaftlichen Publizistik zur Bewältigung der Replikationskrise ist die Verwendung von registrierten Berichten.<ref>{{Cite web|title = Registered Replication Reports|publisher=Association for Psychological Science|url = http://www.psychologicalscience.org/index.php/replication|accessdate = 2015-11-13}}</ref><ref>{{Cite news|title = Psychology's 'registration revolution'|url = https://www.theguardian.com/science/head-quarters/2014/may/20/psychology-registration-revolution|newspaper = The Guardian|accessdate = 2015-11-13|first = Chris|last = Chambers|date = 2014-05-20}}</ref> Das registrierte Berichtsformat verlangt von den AutorInnen, vor der Datenerhebung eine Beschreibung der Studienmethoden und Analysen einzureichen. Sobald die Methode und der Analyseplan durch Peer-Review überprüft wurden, ist die Veröffentlichung der Ergebnisse vorläufig gewährleistet, je nachdem, ob die Autoren das vorgeschlagene Protokoll einhalten. Ein Ziel der registrierten Berichte ist es, den „Publication bias” zu signifikanten Ergebnissen zu umgehen, der zur Anwendung fragwürdiger Forschungspraktiken führen kann, und Förderung der Veröffentlichung von methodisch strengeren Studien.

Die Zeitschrift 'Psychologische Wissenschaft'' hat die Vorregistrierung von Studien und die Berichterstattung über Wirkungsgrößen und Konfidenzintervalle gefördert.<ref>{{Cite journal|title = Replication in Psychological Science|journal = Psychological Science|date = 2015-11-09|issn = 0956-7976|pmid = 26553013|pages = 1827–32|doi = 10.1177/0956797615616374|first = D. Stephen|last = Lindsay|volume = 26|issue = 12}}</ref> Der Chefredakteur stellte auch fest, dass die Redaktion die Wiederholung von Studien mit überraschenden Ergebnissen aus Untersuchungen mit kleinen Stichprobenumfängen fordern wird, bevor die Manuskripte veröffentlicht werden können.

Darüber hinaus hat nur ein sehr kleiner Teil der wissenschaftlichen Zeitschriften in der Psychologie und den Neurowissenschaften ausdrücklich erklärt, dass sie Einreichungen von Replikationsstudien in ihrem Ziel und Umfang oder Anweisungen an Autoren begrüßen.<ref>{{Cite journal|last=Yeung|first=Andy W. K.|date=2017|title=Do Neuroscience Journals Accept Replications? A Survey of Literature|journal=Frontiers in Human Neuroscience|language=English|volume=11|pages=468|doi=10.3389/fnhum.2017.00468|pmid=28979201|pmc=5611708|issn=1662-5161}}</ref><ref>{{Cite journal|last=Martin|first=G. N.|last2=Clarke|first2=Richard M.|date=2017|title=Are Psychology Journals Anti-replication? A Snapshot of Editorial Practices|journal=Frontiers in Psychology|language=English|volume=8|pages=523|doi=10.3389/fpsyg.2017.00523|pmid=28443044|pmc=5387793|issn=1664-1078}}</ref> Dieses Phänomen fördert nicht die Berichterstattung über oder gar die Durchführung von Replikationsstudien.

===Hervorhebung von Replikationsversuchen im Unterricht ===

Basierend auf Kursarbeiten zu experimentellen Methoden am MIT und in Stanford wurde vorgeschlagen, dass Methodenkurse in der Psychologie eher Replikationsversuche als Originalstudien betonen sollen.<ref>{{Cite journal|title = Teaching Replication|journal = Perspectives on Psychological Science|date = 2012-11-01|issn = 1745-6916|pmid = 26168118|pages = 600–604|volume = 7|issue = 6|doi = 10.1177/1745691612460686|first = Michael C.|last = Frank|first2 = Rebecca|last2 = Saxe}}</ref><ref>{{Cite journal|title = Harnessing the Undiscovered Resource of Student Research Projects|journal = Perspectives on Psychological Science|date = 2012-11-01|issn = 1745-6916|pmid = 26168119|pages = 605–607|volume = 7|issue = 6|doi = 10.1177/1745691612459057|first = Jon E.|last = Grahe|first2 = Alan|last2 = Reifman|first3 = Anthony D.|last3 = Hermann|first4 = Marie|last4 = Walker|first5 = Kathryn C.|last5 = Oleson|first6 = Michelle|last6 = Nario-Redmond|first7 = Richard P.|last7 = Wiebe}}</ref>Ein solcher Ansatz würde den Studierenden helfen, wissenschaftliche Methodik zu erlernen und zahlreiche unabhängige Replikationen von sinnvollen wissenschaftlichen Erkenntnissen zu liefern, die die Wiederholbarkeit von wissenschaftlichen Erkenntnissen testen würden. Einige haben empfohlen, dass DoktorandInnen vor dem Abschluss einen qualitativ hochwertigen Replikationsversuch zu einem Thema ihrer Doktorarbeit veröffentlichen müssen.<ref name="Everett 1152" />

===Reduzierung des ''p''-Wertes, der für die Aussagekraft neuer Ergebnisse erforderlich ist ===

Viele Veröffentlichungen erfordern einen ''p''-Wert von ''p'' < 0,05, um die statistische Signifikanz zu beanspruchen. Das Papier "Redefine statistical significance",<ref>{{Cite journal|title = Redefine statistical significance|url = https://psyarxiv.com/mky9j|journal = PsyArXiv|first = Daniel|last = Benjamin}}</ref>, das von einer großen Anzahl von Wissenschaftlern und Mathematikern unterzeichnet wurde, schlägt vor, dass wir in "Bereichen, in denen die Schwelle für die Definition der statistischen Signifikanz für neue Entdeckungen ''P''' < 0,05 beträgt, eine Änderung zu ''P'' < 0,005 vorschlagen. Dieser einfache Schritt würde die Reproduzierbarkeit der wissenschaftlichen Forschung in vielen Bereichen sofort verbessern."

Ihre Begründung ist, dass "eine der Hauptursachen für die Nicht-Reproduzierbarkeit (ist, dass die) statistischen Beweisstandards für die Inanspruchnahme neuer Entdeckungen in vielen Wissenschaftsbereichen einfach zu niedrig sind. Die Zuordnung von "statistisch signifikanten" Befunden zu "P" < 0,05 führt zu einer hohen Rate an Falschpositiven, auch wenn keine anderen experimentellen, prozeduralen und Berichtsprobleme vorliegen".

===Behebung der Fehlinterpretation von ''p''-Werten ===

Obwohl Statistiker einhellig der Meinung sind, dass die Verwendung des ''p'' < 0,05 schwächere Beweise liefert, als allgemein angenommen wird, fehlt es an Einigkeit darüber, was dagegen getan werden sollte. Einige haben sich dafür ausgesprochen, dass Bayes'sche Methoden die ''p''-Werte ersetzen sollten. Dies ist nicht in großem Umfang geschehen, teils weil es kompliziert ist, teils weil viele Benutzer der Spezifikation früherer Distributionen misstrauen, weil es keine exakten Daten gibt. Eine vereinfachte Version des Bayes'schen Arguments, basierend auf dem Testen einer Nullhypothese wurde von Colquhoun (2014, 2017) vorgeschlagen).<ref name="DC2014">{{cite journal|last1=Colquhoun|first1=David|title=An investigation of the false discovery rate and the misinterpretation of ''p''-values|journal=Royal Society Open Science|year=2015|volume=1|issue=3|page=140216|doi=10.1098/rsos.140216|pmid=26064558|pmc=4448847|arxiv=1407.5296|bibcode=2014RSOS....140216C}}</ref><ref name="DC2017">{{cite journal|last1=Colquhoun|first1=David|title=The reproducibility of research and the misinterpretation of p-values|journal=Royal Society Open Science|volume=4|issue=12|pages=171085|date=2017|doi=10.1098/rsos.171085|pmid=29308247|pmc=5750014}}</ref> Die logischen Probleme der induktiven Inferenz wurden in "The problem with p-values" (2016) diskutiert).<ref name="DC2016">{{cite web|last1=Colquhoun|first1=David|title=The problem with p-values|url=https://aeon.co/essays/it-s-time-for-science-to-abandon-the-term-statistically-significant|work=Aeon Magazine|accessdate=11 December 2016}}</ref>

Die Gefahren des Vertrauens auf ''p''-Werte wurden betont, indem darauf hingewiesen wurde, dass selbst die Beobachtung von ''p'' = 0,001 nicht unbedingt ein starker Beweis für die Nullhypothese war.<ref name="DC2017" /> Trotz der Tatsache, dass das Wahrscheinlichkeitsverhältnis zugunsten der alternativen Hypothese über die Null nahe bei 100 liegt, hätte selbst die Beobachtung von ''p'' = 0.001 ein falsch positives Risiko von 8 Prozent, wenn die Hypothese unplausibel wäre, mit einer vorherigen Wahrscheinlichkeit eines realen Effekts von 0,1. Sie würde nicht einmal das Niveau von 5 Prozent erreichen.

Es wurde empfohlen,<ref name="DC2017" /> die Begriffe "signifikant" und "nicht signifikant" nicht zu verwenden. ''p''-Werte und Vertrauensintervalle sollten weiterhin angegeben werden, aber sie sollten von einem Hinweis auf das Risiko für Falschpositive begleitet werden. Es wurde vorgeschlagen, dass der beste Weg, dies zu tun, darin bestehe, die vorherige Wahrscheinlichkeit zu berechnen, die notwendig wäre, um ein falsch positives Risiko von beispielsweise 5% zu erreichen. Die Berechnungen können mit R-Skripten durchgeführt werden, die zur Verfügung gestellt werden,<ref name="DC2017" /> oder, einfacher gesagt, mit einem Online-Rechner.<ref name="fpr-calc">{{cite web|last1=Longstaff|first1=Colin|last2=Colquhoun|first2=David|title=Calculator for false positive risk (FPR)|url=http://fpr-calc.ucl.ac.uk/|publisher=UCL}}</ref> Dieser sogenannte umgekehrte Bayes'sche Ansatz, der von Matthews (2001) vorgeschlagen wurde),<ref>{{cite journal|last1=Matthews|first1=R. A. J.|title=Why should clinicians care about Bayesian methods?|journal=Journal of Statistical Planning and Inference|date=2001|volume=94|pages=43–58|doi=10.1016/S0378-3758(00)00232-9}}</ref> ist eine Möglichkeit, das Problem zu vermeiden, dass die vorherige Wahrscheinlichkeit selten bekannt ist.

===Ermutigung zu größeren Stichproben ===

Um die Qualität der Replikationen zu verbessern, werden oft größere Stichproben benötigt als in der Originalstudie<ref>{{Cite journal|title = Is psychology suffering from a replication crisis? What does "failure to replicate" really mean?|journal = American Psychologist|pages = 487–498|volume = 70|issue = 6|doi = 10.1037/a0039400|first = Scott E.|last = Maxwell|first2 = Michael Y.|last2 = Lau|first3 = George S.|last3 = Howard|pmid=26348332|year = 2015}}</ref> Größere Stichproben sind erforderlich, da Schätzungen der Effektgrößen in veröffentlichten Arbeiten oft übertrieben sind, da sie durch „Publication bias” und große Stichprobenvariabilität im Zusammenhang mit kleinen Stichprobengrößen in einer Originalstudie verursacht werden.<ref>{{Cite journal|title = Small studies are more heterogeneous than large ones: a meta-meta-analysis|journal = Journal of Clinical Epidemiology|pages = 860–869|volume = 68|issue = 8|doi = 10.1016/j.jclinepi.2015.03.017|pmid = 25959635|first = Joanna|last = IntHout|first2 = John P. A.|last2 = Ioannidis|first3 = George F.|last3 = Borm|first4 = Jelle J.|last4 = Goeman|year = 2015}}</ref><ref name="Button 365–376">{{Cite journal|title = Power failure: why small sample size undermines the reliability of neuroscience|journal = Nature Reviews Neuroscience|date = 2013-05-01|issn = 1471-003X|pages = 365–376|volume = 14|issue = 5|doi = 10.1038/nrn3475|first = Katherine S.|last = Button|first2 = John P. A.|last2 = Ioannidis|first3 = Claire|last3 = Mokrysz|first4 = Brian A.|last4 = Nosek|first5 = Jonathan|last5 = Flint|first6 = Emma S. J.|last6 = Robinson|first7 = Marcus R.|last7 = Munafò|pmid=23571845}}</ref><ref name="Button 365–376" /><ref>{{Cite journal|title = Consequences of prejudice against the null hypothesis|url = http://content.apa.org/journals/bul/82/1/1|journal = Psychological Bulletin|pages = 1–20|volume = 82|issue = 1|doi = 10.1037/h0076157|language = en-US|first = Anthony G.|last = Greenwald|year = 1975}}</ref>  Weiterhin führt die Verwendung von Signifikanz-Schwellen in der Regel zu überhöhten Effekten, da gerade bei kleinen Stichprobengrößen nur die größten Effekte signifikant werden.<ref>{{cite journal|last1=Amrhein|first1=Valentin|last2=Korner-Nievergelt|first2=Fränzi|last3=Roth|first3=Tobias|title=The earth is flat (p > 0.05): significance thresholds and the crisis of unreplicable research|journal=PeerJ|date=2017|volume=5|page=e3544|doi=10.7717/peerj.3544|pmid=28698825|pmc=5502092}}</ref>

===Gemeinsame Nutzung von Rohdaten in Online-Depots ===

Online-Depots, in denen Daten, Protokolle und Ergebnisse gespeichert und von der Öffentlichkeit ausgewertet werden können, sollen die Integrität und Reproduzierbarkeit der Forschung verbessern. Beispiele für solche Depots sind das Open Science Framework, das Registry of Research Data Repositories und Psychfiledrawer.org. Websites wie das Open Science Framework bieten Marken für die Verwendung von Open Science Praktiken, um Wissenschaftler zu motivieren. Es wurde jedoch befürchtet, dass diejenigen, die ihre Daten und ihren Code am ehesten für Analysen zur Verfügung stellen, die Forscher sind, die wahrscheinlich ohnehin die anspruchsvollsten sind.<ref name=":2">{{Cite journal|title = Anticipating consequences of sharing raw data and code and of awarding badges for sharing|journal = Journal of Clinical Epidemiology|volume = 70|pages = 258–260|doi = 10.1016/j.jclinepi.2015.04.015|pmid = 26163123|first = John P. A.|last = Ioannidis|year = 2016}}</ref> John Ioannidis an der Stanford University schlug vor, dass "das Paradoxon entstehen kann, dass die akribischsten und anspruchsvollsten und methodisch versiertesten und vorsichtigen Forscher anfälliger für Kritik- und Reputationsangriffe von Reanalyzern werden können, die nach Fehlern suchen, egal wie geringfügig diese Fehler sind".<ref name=":2" />

=== Bessere Finanzierung von Replikationsstudien ===

Im Juli 2016 stellte die Niederländische Organisation für wissenschaftliche Forschung 3 Millionen Euro für Replikationsstudien zur Verfügung. Die Finanzierung erfolgt für die Replikation auf der Grundlage der Reanalyse bestehender Daten und für die Replikation durch Sammlung und Analyse neuer Daten. Gefördert werden die Bereiche Sozialwissenschaften, Gesundheitsforschung und Gesundheitsinnovation.<ref>{{cite web|title=NWO makes 3 million available for Replication Studies pilot|url=http://www.nwo.nl/en/news-and-events/news/2016/nwo-makes-3-million-available-for-replication-studies-pilot.html|website=NWO|accessdate=2 August 2016}}</ref>

Im Jahr 2013 finanzierte die Laura and John Arnold Stiftung den Start des [https://en.wikipedia.org/wiki/Center_for_Open_Science Open Center for Open Science] mit einem Zuschuss von 5,25 Millionen Dollar und stellte bis 2017 weitere 10 Millionen Dollar zur Verfügung.<ref name="Wired2017">{{cite news|last1=Apple|first1=Sam|title=The Young Billionaire Behind the War on Bad Science|url=https://www.wired.com/2017/01/john-arnold-waging-war-on-bad-science/|work=Wired|date=January 22, 2017}}</ref> Sie finanzierte auch die Gründung des Meta-Research Innovation Center at Stanford at Stanford at Stanford University unter der Leitung von [https://en.wikipedia.org/wiki/John_Ioannidis|John Ioannidis] und Steven Goodman, um Wege zur Verbesserung der wissenschaftlichen Forschung zu untersuchen.<ref name="Wired2017" /> Es wurden auch Mittel für die AllTrials Initiative unter der Leitung von Ben Goldacre bereitgestellt.<ref name="Wired2017" />

===Betonung einer Triangulation, nicht nur der Replikation ===

Marcus R. Munafò und George Davey Smith argumentieren in einer von ''Nature'' veröffentlichten Arbeit, dass die Forschung die Triangulation und nicht nur die Replikation in den Vordergrund stellen sollte. Sie stellen fest, dass

<blockquote>Wiederholung allein uns nur begrenzt weit bringen wird (und) die Sache tatsächlich verschlimmern könnte...... Wir glauben, dass ein wesentlicher Schutz vor fehlerhaften Ideen die Triangulation ist. Dies ist die strategische Nutzung mehrerer Ansätze zur Lösung einer Frage. Jeder Ansatz hat seine eigenen, voneinander unabhängigen Annahmen, Stärken und Schwächen. Ergebnisse, die zwischen verschiedenen Methoden übereinstimmen, sind weniger wahrscheinlich Artefakte ..... Vielleicht ist ein Grund, warum die Replikation so viel Interesse erregt hat, die oft wiederholte Vorstellung, dass die Falsifikation im Mittelpunkt des wissenschaftlichen Ansatzes stehe. Diese Idee wurde durch [[Karl Popper]]s Maxime aus den 1950er Jahren populär gemacht, dass Theorien nie bewiesen, sondern nur falsifiziert (widerlegt) werden können. Doch eine Überbetonung der Wiederholungsexperimente könnte ein unbegründetes Gefühl der Gewissheit hinsichtlich von Ergebnissen geben, die auf einem einzigen Ansatz beruhen.  .... Wissenschaftsphilosophen haben sich seit Popper weiterentwickelt. Bessere Beschreibungen der tatsächlichen Arbeitsweise von Wissenschaftlern beinhalten das, was der Erkenntnistheoretiker Peter Lipton 1991 als "Schlussfolgerung aus der besten Erklärung" bezeichnete".<ref name=Munafo2018>{{cite journal|last1=Munafò|first1=Marcus R.|last2=Smith|first2=George Davey|title=Robust research needs many lines of evidence|journal=Nature|volume=553|issue=7689|pages=399–401|date=January 23, 2018|doi=10.1038/d41586-018-01023-3|pmid=29368721|bibcode=2018Natur.553..399M}}</ref></blockquote>

== Weiterführende Literatur ==

*{{cite web |last1=Bastian |first1=Hilda |title=Reproducibility Crisis Timeline: Milestones in Tackling Research Reliability |url=https://blogs.plos.org/absolutely-maybe/2016/12/05/reproducibility-crisis-timeline-milestones-in-tackling-research-reliability/ |website=Absolutely Maybe |accessdate=5 June 2019 |date=5 December 2016}} 
*{{cite book |last1=Harris |first1=Richard |title=Rigor Mortis: How Sloppy Science Creates Worthless Cures, Crushes Hope, and Wastes Billions |date=2017 |publisher=Basic Books |location=New York |isbn=9780465097906}} 
*[https://www.firstthings.com/article/2016/05/scientific-regress Scientific Regress] – William A. Wilson in First Things, May 2016 
*[https://www.displayr.com/what-is-the-replication-crisis/ What is the Replication Crisis?] by Tim Bock. – Being a short summary of what the replication crisis is about. 
*[http://www.plosmedicine.org/article/info:doi/10.1371/journal.pmed.0020124 Why Most Published Research Findings Are False] by John P. A. Ioannidis, Public Library of Science Medicine, 30 August 2005. 
*[https://fabiusmaximus.com/2016/04/19/replication-crisis-in-science-95394/ The replication crisis in science has just begun. It will be big.] by Larry Kummer, Editor Science & Nature 19 April 2016 on Fabius Maximus website. 

== Fußnoten==

<references />