PaperfyPAPERFYHome
Kostenlos startenAnmelden
Paperfy Leitfäden
Bewertung des VerzerrungsrisikosSystematisches Review7 Min.Für alle, die kritische Bewertung oder Review-Arbeit machen

Verzerrungsrisiko bewerten:nach Verzerrung fragen, nicht nach Qualität

Wurden Sie schon einmal gebeten, „das Verzerrungsrisiko dieses Papers zu bewerten“ – und haben, ohne recht zu wissen, worauf Sie schauen sollen, vage „wahrscheinlich geringes Risiko” notiert?\n\nBeginnen wir bei der Terminologie. Die Bewertung des Verzerrungsrisikos ist keine Benotung des Papers. Sie schätzt ein, wie viel Spielraum die Methoden der Studie dafür lassen, dass ihre Ergebnisse von der Wahrheit abweichen. Sobald das sitzt, wissen Sie genau, wo Sie hinschauen müssen.

Veröffentlicht: 2026-07-22

Ein Paper-PDF als etwa 3-minütige Radiosendung

Ohne Registrierung. Mit einem Paper-PDF testen, das Sie lesen möchten.

Ohne Registrierung testen

In diesem Artikel

Saubere Ergebnisse und verzerrungsresistente Methoden sind zweierleiDie Optik wechselt mit dem StudiendesignWorauf man bei einem RCT schautWo man liest: Methoden, Registereinträge, SupplementsWarum eine KI-Zusammenfassung das Verzerrungsrisiko nicht beurteilen kannJede Domäne als Urteil plus eine Zeile Begründung festhaltenErst die Radio-Show hören, dann das PDF selbst lesenZum Schluss: Auch geübte Bewertende sind sich uneinsMit Paperfy starten

Saubere Ergebnisse und verzerrungsresistente Methoden sind zweierlei

Eine verbreitete Falle ist die Intuition, eine Studie mit statistisch signifikanten, glatten Ergebnissen müsse wohl ein geringes Risiko haben. Eher das Gegenteil: Verzerrte Methoden können mühelos glatte Ergebnisse liefern.

Deshalb schaut die Risk-of-Bias-Bewertung auf die Methoden, bevor sie auf die Ergebnisse schaut. Grundlage des Urteils ist die Beschreibung der Methoden, nicht der Glanz der Befunde.

Die Optik wechselt mit dem Studiendesign

Eine Grundvoraussetzung: Was als Verzerrungsrisiko zählt, hängt vom Design ab. RCTs, Beobachtungsstudien und Diagnosegenauigkeitsstudien haben jeweils eigene Standardinstrumente für die Bewertung.

Für jedes dieser Designs existieren etablierte Instrumente. Welches Sie nutzen, hängt von Review-Typ, Team und Ziel-Journal ab – klären Sie das, bevor Sie anfangen. Im Folgenden illustrieren wir die gemeinsame Logik an einem RCT.

Worauf man bei einem RCT schaut

Bei RCTs beginnen die Standardprüfungen mit der Zuteilungsmethode (ist die Erzeugung der Randomisierungssequenz beschrieben?) und der verdeckten Zuteilung (gab es einen Mechanismus, der verhinderte, dass jemand kommende Zuteilungen vorhersehen konnte?).

Dann Verblindung (wussten Teilnehmende, Behandelnde und vor allem die Outcome-Erhebenden nichts von der Gruppenzugehörigkeit?), fehlende Daten (wie viele fielen aus, und wie wurde damit umgegangen?) und selektives Berichten – decken sich die präregistrierten Endpunkte mit dem, was das Paper berichtet?

Wo man liest: Methoden, Registereinträge, Supplements

Diese Information ist verstreut – hauptsächlich über den Methodenteil, aber auch über Studienregister (über die Registrierungsnummer auffindbar), Protokollpublikationen und Supplements.

„Nicht berichtet“ ist selbst ein Befund. Wird die verdeckte Zuteilung nirgends erwähnt, fließt genau dieses Fehlen in die Bewertung ein. Die Grundregel lautet: Schweigen nie als „war schon in Ordnung“ lesen.

Warum eine KI-Zusammenfassung das Verzerrungsrisiko nicht beurteilen kann

Inzwischen liegt der Grund auf der Hand. Eine Zusammenfassung ist die Kompression des Geschriebenen – und die beiden Schlüssel dieser Bewertung, das Nicht-Geschriebene und die Abweichungen vom Registereintrag, können eine Zusammenfassung schon im Prinzip nicht überleben.

Nutzlos ist KI hier trotzdem nicht. Sie zu bitten, „alle Passagen zu Zuteilung, Verblindung und fehlenden Daten aus diesem Paper zu ziehen“, ist eine echte Hilfe bei der Vorbereitung. Das endgültige Urteil aber – einschließlich der Frage, ob diese Extraktion vollständig war – gehört jemandem, der das Original gelesen hat.

Jede Domäne als Urteil plus eine Zeile Begründung festhalten

Halten Sie für jede Domäne nicht nur das Urteil fest, sondern auch die Begründung dahinter: „Verblindung: einige Bedenken – keine Erwähnung der Verblindung der Outcome-Erhebenden (Methods S. 5).“

Aufzeichnungen mit angehängtem Beleg fließen direkt in Konsensdiskussionen im Team und in Antworten an Gutachter. Ein Satz Begründung überdauert das Urteil selbst.

Erst die Radio-Show hören, dann das PDF selbst lesen

Ein Werkzeug wie Paperfy verwandelt Ihr PDF in eine etwa 3-minütige Radio-Show (zwei Stimmen, die Hintergrund, Methoden, Ergebnisse, Limitationen und Bedeutung durchgehen) – das verschafft Ihnen einen schnellen Überblick, bevor Sie ins Detail gehen.

Danach öffnen Sie das PDF selbst in Ihrem PDF-Reader und prüfen die Methodenbeschreibung, Registereinträge und Supplements Zeile für Zeile. Figuren, Zahlen, Limitationen und das Nicht-Geschriebene – all das bleibt Ihre eigene Aufgabe. Paperfy ist der Einstieg, nicht der Ersatz.

Zum Schluss: Auch geübte Bewertende sind sich uneins

Die Risk-of-Bias-Bewertung ist eine Aufgabe, bei der selbst geschulte Bewertende auseinanderliegen. Behandeln Sie das Urteil einer einzelnen Person nicht als endgültig; planen Sie ein, unsichere Punkte im Team zu diskutieren.

Das Ziel dieses Prozesses ist nicht, mit Gewissheit zu verkünden – sondern mit Belegen argumentieren zu können.

Das Wichtigste in Kürze

  • Bewertet wurde anhand der Methodenbeschreibung, nicht nach dem Eindruck der Ergebnisse.
  • Das Team hat ein zum Studiendesign passendes Bewertungsinstrument bestätigt.
  • „Nicht berichtet“ wurde nie als „war schon in Ordnung“ gelesen.
  • Jedes Urteil wurde mit einer Zeile Begründung festgehalten.

Ein Paper-PDF als etwa 3-minütige Radiosendung

Ohne Registrierung. Mit einem Paper-PDF testen, das Sie lesen möchten.

Ohne Registrierung testen

Systematisches Review

Dieses Thema Erkunden

Alle Leitfäden zu diesem Workflow gebündelt lesen.

Alle Leitfäden ansehen

Als Nächstes Lesen

Diese Leitfäden führen denselben Ablauf weiter.

systematisches Review vs. MetaanalyseSystematisches Review vs. Metaanalyse: Das eine ist ein Prozess, das andere ein WerkzeugScoping Review durchführenScoping Review durchführen: Die Karte zeichnen statt der Antwort hinterherjagensystematisches Review durchführenSystematisches Review: Was es von einer sehr gründlichen Literaturübersicht unterscheidet