Untersuchung des "Spins" in wissenschaftlichen Fachzeitschriften
Eine kürzlich durchgeführte Studie untersuchte den „Spin“ in Forschungsarbeiten zur Psychiatrie und Psychologie. Die Autoren der Studie fanden in mehr als der Hälfte der von ihnen analysierten Abstracts Spin.Welche Auswirkungen könnte dies auf die Entscheidungen der Ärzte haben?
Wenn Nachrichten- und Medienunternehmen um Ansichten konkurrieren, können sie manchmal Überschriften und Inhalte übertreiben, um den Leser anzulocken.
Obwohl viele glauben, dass wissenschaftliche Zeitschriften zu den verlässlichsten Informationsquellen gehören, sind sie nicht immun gegen den Wunsch, gelesen und geteilt zu werden.
In einer kürzlich durchgeführten Studie wurde untersucht, wie viel „Spin“ -Autoren in den Abstracts von Forschungsarbeiten verwendet wurden, die in Fachzeitschriften für Psychologie und Psychiatrie veröffentlicht wurden.
Sie haben sich für Abstracts entschieden, weil sie das gesamte Papier zusammenfassen, und Ärzte verwenden sie häufig, um medizinische Entscheidungen zu treffen.
Was ist Spin?
In dieser Studie skizzieren die Autoren ihre Definition von Spin wie folgt:
"Die Verwendung spezifischer Berichtsstrategien, aus welchen Gründen auch immer, um hervorzuheben, dass die experimentelle Behandlung trotz eines statistisch nicht signifikanten Unterschieds für das primäre Ergebnis vorteilhaft ist, oder um den Leser von statistisch nicht signifikanten Ergebnissen abzulenken."
Die Autoren veröffentlichten ihre Ergebnisse in der Zeitschrift BMJ Evidenzbasierte Medizin. Sie sahen sich Artikel aus den sechs führenden Fachzeitschriften für Psychiatrie und Psychologie von 2012 bis 2017 an.
Die Zeitschriften enthalten JAMA Psychiatrie, das American Journal of Psychiatry, und das British Journal of Psychiatry.
Insbesondere konzentrierten sich die Forscher auf randomisierte kontrollierte Studien mit „nicht signifikanten primären Endpunkten“. Der primäre Endpunkt einer Studie ist das Hauptergebnis der Studie. „Nicht signifikant“ bedeutet in diesem Zusammenhang, dass das Team statistisch gesehen nicht genügend Beweise gefunden hat, um seine Theorie zu stützen.
Spin gibt es in vielen Formen, einschließlich:
- selektive Berichterstattung über Ergebnisse, wobei die Autoren nur bestimmte Ergebnisse erwähnen
- P-Hacking, bei dem Forscher eine Reihe statistischer Tests durchführen, aber nur die Zahlen aus Tests veröffentlichen, die signifikante Ergebnisse liefern
- unangemessener oder irreführender Einsatz statistischer Maßnahmen
Wie häufig ist Spin?
Insgesamt analysierten sie die Abstracts von 116 Arbeiten. Von diesen zeigten 56% Anzeichen von Spin. Dies beinhaltete Spin in 2% der Titel, 21% der Ergebnisabschnitte des Abstracts und 49% in den Abschlussabschnitten des Abstracts. In 15% der Arbeiten war Spin sowohl in den Ergebnissen als auch in den Abschlussabschnitten der Abstracts vorhanden.
Die Forscher untersuchten auch, ob die Finanzierung der Industrie mit Spin verbunden war. Vielleicht überraschend fanden sie keine Beweise dafür, dass eine finanzielle Unterstützung durch die Industrie die Wahrscheinlichkeit von Spin erhöhte.
Die Ergebnisse sind besorgniserregend. Obwohl der Spin in den Nachrichtenmedien im Allgemeinen an sich besorgniserregend ist, verwenden Ärzte Forschungsberichte, um klinische Entscheidungen zu steuern. Wie die Autoren schreiben:
"Forscher haben die ethische Verpflichtung, die Ergebnisse ihrer Forschung ehrlich und klar zu melden." Im Abschnitt "Zusammenfassung" können die Autoren jedoch die darin enthaltenen Details auswählen. Die Autoren der aktuellen Studie haben Bedenken, was dies für Ärzte bedeuten könnte:
„Das Hinzufügen von Spin zum Abstract eines Artikels kann Ärzte irreführen, die versuchen, Schlussfolgerungen über eine Behandlung für Patienten zu ziehen. Die meisten Ärzte lesen die meiste Zeit nur die Zusammenfassung des Artikels. “
Die Implikationen
Obwohl die Forscher die Auswirkungen des Spins nicht eingehend untersucht haben, verweisen die Autoren auf eine Studie, die ihren Standpunkt klar macht.
Darin sammelten Wissenschaftler Abstracts aus dem Bereich der Krebsforschung. Alle waren randomisierte kontrollierte Studien mit einem statistisch nicht signifikanten primären Ergebnis. Alle Abstracts enthielten Spin.
Die Forscher erstellten zweite Versionen dieser Abstracts, in denen sie den Spin entfernten. Sie rekrutierten 300 Onkologen als Teilnehmer. Die Forscher gaben der Hälfte von ihnen ein Original-Abstract mit Spin und der anderen Hälfte das Abstract ohne Spin.
Besorgniserregend war, dass die Ärzte, die die Abstracts mit Spin lasen, die in der Zeitung behandelte Intervention als vorteilhafter bewerteten.
Die Autoren des kürzlich erschienenen Studienpapiers schreiben: „Diejenigen, die Manuskripte für klinische Studien schreiben, wissen, dass sie nur über eine begrenzte Zeit und einen begrenzten Raum verfügen, um die Aufmerksamkeit des Lesers auf sich zu ziehen. Es ist wahrscheinlicher, dass positive Ergebnisse veröffentlicht werden, und viele Manuskriptautoren haben sich fragwürdigen Berichtspraktiken zugewandt, um ihre Ergebnisse zu verschönern. “
Eine weitere Studie, die 2016 veröffentlicht wurde, erweitert den Umfang dieser Ausgabe. Sie untersuchten, wie Peer Reviewer - erfahrene Wissenschaftler, die Artikel vor der Veröffentlichung prüfen - den Spin beeinflussten. Sie fanden heraus, dass der Peer Reviewer in 15% der Fälle die Autoren aufforderte, Spin hinzuzufügen.
Die aktuelle Studie weist einige Einschränkungen auf. Beispielsweise gelten diese Ergebnisse möglicherweise nicht für andere Zeitschriften oder Forschungsbereiche. Sie stellen auch fest, dass das Identifizieren von Spin ein subjektives Unterfangen ist, und obwohl sie zwei unabhängige Datenextraktoren eingesetzt haben, gibt es Raum für Fehler.
Die genaue Größe des Spin-Problems in der medizinischen Forschung bleibt abzuwarten, aber die Autoren kommen zu dem Schluss, dass „Autoren, Journal-Redakteure und Peer-Reviewer weiterhin wachsam gegenüber Spin sein sollten, um das Risiko einer voreingenommenen Berichterstattung über Versuchsergebnisse zu verringern. ”
