Übertragbarkeit von Studienergebnissen: IQWiG GA18-01
Hintergrund
Der IQWiG-Bericht GA18-01 untersucht die statistischen Eigenschaften von Verfahren zur Übertragbarkeit von Studienergebnissen auf Teilpopulationen. In Nutzenbewertungen tritt häufig der Fall auf, dass nur eine spezifische Zielpopulation (ZP) einer Gesamtstudie für eine konkrete Fragestellung relevant ist.
Durch die Auswertung einer kleineren Teilpopulation sinkt naturgemäß die statistische Power, um einen vorhandenen Behandlungseffekt nachzuweisen. Es stellt sich die methodische Frage, unter welchen Umständen das signifikante Ergebnis der Gesamtstudie auf die Zielpopulation übertragen werden kann.
Eine Übertragung wird laut Bericht diskutiert, wenn in der Zielpopulation ein nicht signifikanter, aber gleichgerichteter Effekt vorliegt und der Interaktionstest zur Nichtzielpopulation (nZP) nicht signifikant ist. Das Dokument evaluiert verschiedene Testprozeduren, um den Powergewinn gegen die Erhöhung des Fehlers 1. Art abzuwägen.
Empfehlungen
Der Bericht vergleicht verschiedene statistische Testprozeduren zur Übertragbarkeit von Effekten und bewertet deren methodische Güte.
Untersuchte Testprozeduren
Das Dokument analysiert folgende methodische Ansätze:
-
Erweiterungsregel (EWR): Simuliert einen empirischen p-Wert zur Übertragung des Gesamtergebnisses.
-
Modifizierte EWR (EWR0.33): Wendet die EWR nur an, wenn das Verhältnis der Stichprobengrößen von Ziel- zu Nichtzielpopulation mindestens 0,33 beträgt.
-
Anhebungsregel (AHR15): Testet den Effekt in der Zielpopulation mit einem erhöhten Signifikanzniveau von 15 Prozent.
-
Standardvorgehen (A5): Regulärer zweiseitiger Test in der Zielpopulation zum Standard-Signifikanzniveau von 5 Prozent.
Vergleich der statistischen Eigenschaften
| Testprozedur | Beschreibung | Fehler 1. Art (Median) | Empirische Power (Median) |
|---|---|---|---|
| A5 | Standardtest (5 % Niveau) | ca. 5,0 % | 78,5 % |
| EWR | Ursprüngliche Erweiterungsregel | Erhöht (> 10 % in vielen Szenarien) | Nicht weiter empfohlen |
| EWR0.33 | Modifizierte EWR mit Cut-off | ca. 5,5 % | 80,8 % |
| AHR15 | Anhebungsregel (15 % Niveau) | ca. 6,1 % | 84,4 % |
Methodische Schlussfolgerungen
Das IQWiG kommt zu dem Schluss, dass die ursprüngliche Erweiterungsregel (EWR) in einzelnen Datenkonstellationen zu einer inakzeptablen Niveauüberschreitung führt. Die modifizierte Variante (EWR0.33) reduziert zwar den Fehler 1. Art, rechtfertigt aber den hohen Rechenaufwand im Vergleich zu Alternativen nicht.
Als Verfahren der Wahl wird die Anhebungsregel (AHR15) identifiziert. Diese Methode bietet laut Bericht den besten Kompromiss aus praktikablem Rechenaufwand, kontrolliertem Fehler 1. Art und dem höchsten Powergewinn, insbesondere wenn das Standardvorgehen eine geringe Power aufweist.
💡Praxis-Tipp
Bei der Übertragung von Studienergebnissen auf Teilpopulationen reicht ein nicht signifikanter Interaktionstest allein nicht aus, um eine Gleichheit der Effekte zu belegen. Das IQWiG weist darauf hin, dass die Anwendung der Anhebungsregel (AHR15) stets eine bewusste Abwägung zwischen der Inkaufnahme eines erhöhten Fehlers 1. Art und dem erzielbaren Powergewinn erfordert.
Häufig gestellte Fragen
Dies ist laut IQWiG-Bericht relevant, wenn in einer Studie nur eine spezifische Zielpopulation für die Fragestellung von Interesse ist. Oft zeigt diese Teilpopulation aufgrund der geringeren Fallzahl keinen statistisch signifikanten Effekt, obwohl die Gesamtstudie signifikant ist.
Die Erweiterungsregel ist ein statistisches Verfahren, das durch Simulation eines empirischen p-Wertes prüft, ob das signifikante Ergebnis der Gesamtpopulation auf die Zielpopulation übertragen werden kann. Der Bericht zeigt jedoch, dass dieses Verfahren den Fehler 1. Art oft inakzeptabel erhöht.
Das Dokument identifiziert die sogenannte Anhebungsregel (AHR15) als das am besten geeignete Verfahren. Hierbei wird bei erfüllten Vorbedingungen der Effekt in der Zielpopulation mit einem erhöhten Signifikanzniveau von 15 Prozent getestet.
Ein nicht signifikanter Interaktionstest belegt laut Bericht nicht zwingend die Gleichheit von Effekten zwischen Ziel- und Nichtzielpopulation. Es muss mit ausreichender Sicherheit ausgeschlossen werden, dass gegenläufige Effekte vorliegen, bevor Ergebnisse übertragen werden.
War diese Zusammenfassung hilfreich?
Quelle: IQWiG GA18-01: Untersuchung der statistischen Eigenschaften von Verfahren zur Übertragbarkeit von Studienergebnissen auf Teilpopulationen (IQWiG, 2018). Originaldokument ansehen
KI-generierte Zusammenfassung. Keine Diagnose- oder Therapieempfehlung. Die klinische Entscheidung trifft der behandelnde Arzt.