- Die Forscher stellten eine weit verbreitete Verzerrung der Berichterstattung in medizinischen Übersichten fest, in denen Vorteile festgestellt, aber in den Empfehlungen nicht anerkannt werden
- Die Voreingenommenheit war am deutlichsten bei Überprüfungen umstrittener Interventionen, einschließlich des Dampfens zur Raucherentwöhnung
- Die Autoren haben positive Ergebnisse oft heruntergespielt oder abgetan, indem sie eine konsistente erzählerische Taktik angewandt haben
- Die Praxis birgt die Gefahr, dass Ärzte, politische Entscheidungsträger und die Öffentlichkeit über wirksame Optionen zur Schadensbegrenzung irregeführt werden
Ein neues wissenschaftliches Papier stellt in Frage, ob man sich darauf verlassen kann, dass medizinische Berichte über Gesundheitsmaßnahmen wie das Dampfen die volle Wahrheit sagen.
Die Forscher fanden heraus, dass die Autoren die Ergebnisse oft herunterspielen oder sich weigern, die Behandlung zu empfehlen, selbst wenn die Studien eindeutige Vorteile zeigen. Dieses Muster könnte Kliniker, politische Entscheidungsträger und die Öffentlichkeit in die Irre führen.
Die in der Zeitschrift Research Integrity and Peer Review veröffentlichte Arbeit untersucht Dutzende von systematischen Übersichten und stellt ein wiederkehrendes Muster fest: Die Autoren der Übersichten berichten in ihren Ergebnissen über statistisch signifikante Vorteile, empfehlen die Intervention dann aber nicht – oder raten in ihren Schlussfolgerungen sogar aktiv von ihr ab.
Die Autoren sagten: „…in vielen Fällen berichteten die Autoren systematischer Übersichten über Ergebnisse, die für die Wirksamkeit der Behandlung sprechen, lehnten es jedoch ab, die Behandlung zu empfehlen oder sprachen sich gegen sie aus, obwohl die Wirksamkeit in ihren eigenen systematischen Übersichten belegt war.“
Die Ergebnisse haben Auswirkungen weit über die akademische Debatte hinaus. Systematische Überprüfungen werden häufig als Grundlage für klinische Leitlinien, Empfehlungen für die öffentliche Gesundheit und regulatorische Entscheidungen verwendet. Wenn die Schlussfolgerungen die vorgelegten Beweise nicht widerspiegeln, können Verbraucher und Entscheidungsträger ein verzerrtes Bild von Risiko und Nutzen erhalten.
Was ist „reverse spin bias“?
Die Studie führt den Begriff „reverse spin bias“ ein, um Situationen zu beschreiben, in denen Autoren positive Ergebnisse ihrer eigenen Daten herunterspielen oder abtun. Die Forscher definieren ihn als „die erzählerische Herabsetzung oder Verwerfung statistisch signifikanter Ergebnisse von Nutzen“.
Traditionell wird der Begriff „spin bias“ verwendet, um die Übertreibung schwacher oder nicht signifikanter Ergebnisse zu beschreiben. Die Autoren argumentieren jedoch, dass das gegenteilige Problem – die Verharmlosung oder das Ignorieren statistisch signifikanter Vorteile – weitgehend unberücksichtigt geblieben ist.
In dieser Analyse kommt es zu einer umgekehrten Verzerrung, wenn nachgewiesen wird, dass eine Intervention funktioniert, die endgültige Empfehlung jedoch nicht mit diesen Ergebnissen übereinstimmt.
Vaping-Bewertungen zeigen das deutlichste Muster
Die Forscher untersuchten zunächst systematische Übersichten über Vapes zur Raucherentwöhnung, die zwischen 2021 und 2025 veröffentlicht wurden. Von den 16 analysierten Übersichten kamen die meisten zu dem Ergebnis, dass das Dampfen wirksamer ist als andere Hilfsmittel zur Raucherentwöhnung wie eine Nikotinersatztherapie oder gar keine Behandlung.
Trotzdem empfahl nur eine kleine Minderheit der Prüfteams Vapes als Entwöhnungsoption. Einige rieten von ihrer Verwendung ab, während andere es ablehnten, eine Empfehlung abzugeben – selbst wenn ihre eigenen Daten einen klaren Nutzen zeigten.
In der Studie heißt es: „Dreizehn systematische Überprüfungen haben ergeben, dass E-Zigaretten signifikant wirksamer sind als andere Methoden zur Raucherentwöhnung, aber nur drei Autorenteams haben ihre Verwendung als Raucherentwöhnungsbehandlung empfohlen.“
Diese Diskrepanz zwischen den Ergebnissen und den Empfehlungen war nicht unauffällig. In mehreren Fällen folgten auf statistisch signifikante Ergebnisse, die das Dampfen befürworteten, Schlussfolgerungen, die Unsicherheit, mögliche Schäden oder mangelndes Vertrauen in die Evidenzbasis betonten.
Nicht auf das Dampfen beschränkt
Um festzustellen, ob dieses Muster nur bei Nikotinprodukten auftritt, untersuchten die Forscher auch die jüngsten systematischen Übersichten über medizinisches Cannabis zur Schmerzbehandlung – eine weitere politisch und gesellschaftlich umstrittene Maßnahme.
Sie fanden ähnliche Ungereimtheiten. Viele Übersichten berichteten über eine messbare Schmerzlinderung im Zusammenhang mit dem Cannabiskonsum, kamen jedoch zu dem Schluss, dass die Behandlung nicht empfohlen werden sollte oder dass die Beweise nicht ausreichen, um ihre Verwendung zu unterstützen.
Die Konsistenz dieser Ergebnisse bei zwei verschiedenen Interventionen deutet darauf hin, dass es sich nicht um einen methodischen Fehler handelt, sondern um ein breiteres narratives Muster in der Art und Weise, wie kontroverse Behandlungen diskutiert werden.
Fünf häufige Arten, wie Vorteile heruntergespielt werden
In den analysierten Übersichten haben die Autoren fünf wiederkehrende Erzählstrategien identifiziert, mit denen positive Ergebnisse heruntergespielt werden:
Abwertung der Evidenzbasis
In den Reviews wurden die eigenen Daten oft ohne formale Begründung als „begrenzt“ oder „von geringer Qualität“ bezeichnet, selbst wenn keine Standardbewertungsinstrumente angewandt wurden.
Diskreditierung einzelner Studien
Primärstudien, die einen Nutzen zeigten, wurden manchmal als schwach oder unzuverlässig abgetan, ohne dass die etablierten Bewertungen des Risikos einer Verzerrung berücksichtigt wurden.
Appell an die Angst
In einigen Schlussfolgerungen wurden Befürchtungen über nicht näher spezifizierte künftige Schäden geäußert, selbst wenn die negativen Auswirkungen nicht Teil der Ergebnisse der Überprüfung waren.
Ablehnung der Intervention aus Prinzip
In einigen Fällen schienen die Autoren die Behandlungsmodalität selbst abzulehnen – zum Beispiel den Nikotinkonsum – unabhängig von der vergleichenden Wirksamkeit.
Auslassung günstiger Ergebnisse
Eine kleine Anzahl von Übersichten schloss Ergebnisse von Untergruppen aus oder übersahen sie, die einen klaren Nutzen zeigten.
Warum dies für die Schadensbegrenzung wichtig ist
Die Studie warnt davor, dass die Verzerrung durch den umgekehrten Spin reale Konsequenzen haben kann. Wenn wirksame Interventionen negativ dargestellt oder abgetan werden, werden sie möglicherweise aus klinischen Leitlinien und Strategien für die öffentliche Gesundheit ausgeschlossen. Die Autoren stellen fest, dass dies dazu führt, dass „potenziell wirksame Behandlungen vernachlässigt werden und die durch klinische Studien gewonnenen Daten verschwendet werden“.
Für Raucher, denen es schwerfällt, mit herkömmlichen Methoden aufzuhören, könnte dies bedeuten, dass der Zugang zu risikoärmeren Alternativen eingeschränkt wird, obwohl es immer mehr Beweise dafür gibt, dass diese den Menschen helfen können, mit dem Rauchen aufzuhören.
Die Autoren äußern auch Bedenken hinsichtlich der Integrität der Forschung im Allgemeinen und argumentieren, dass Redaktions- und Peer-Review-Prozesse möglicherweise nicht in der Lage sind, Unstimmigkeiten zwischen Evidenz und Empfehlungen zu beheben.
Ein Ruf nach genauerer Prüfung
Die Studie behauptet nicht, dass das Dampfen oder andere umstrittene Maßnahmen risikolos sind. Stattdessen fordert sie mehr Transparenz und Konsistenz bei der Interpretation und Präsentation von Beweisen.
Die Autoren hoffen, Redakteure, Gutachter und Leser dazu zu ermutigen, genauer zu prüfen, ob die Schlussfolgerungen wirklich die Daten widerspiegeln, indem sie die Verzerrungen benennen und beschreiben.
Das Papier kommt zu dem Schluss: „…Redakteure und Peer-Reviewer müssen auf Diskrepanzen zwischen den Ergebnissen biomedizinischer systematischer Übersichten und den Behandlungsempfehlungen, die ihre Autoren befürworten, aufmerksam sein.“
