Entwicklung des STAR-Tools: Ein neues Werkzeug zur Bewertung von medizinischen Leitlinien
Warum ist es schwierig, gute medizinische Leitlinien zu erstellen? Und wie können wir sicherstellen, dass diese Leitlinien wirklich hilfreich sind? In den letzten 30 Jahren wurden in China über 1.000 medizinische Leitlinien veröffentlicht. Jedes Jahr kommen mehr als 200 neue hinzu. Aber nicht alle sind gleich gut. Viele haben Schwächen in der Anwendbarkeit, der Transparenz oder der wissenschaftlichen Grundlage. Bisherige Bewertungswerkzeuge sind oft unvollständig oder schwer zu nutzen. Das macht es schwierig, die Qualität der Leitlinien zu überprüfen.
Um dieses Problem zu lösen, hat eine Gruppe von Experten das Scientific, Transparent and Applicable Rankings (STAR)-Tool entwickelt. Dieses Werkzeug soll helfen, medizinische Leitlinien umfassend und einfach zu bewerten. Es richtet sich an Ärzte, Politiker und Fachleute, die Leitlinien erstellen.
Wie wurde das STAR-Tool entwickelt?
Die Entwicklung des STAR-Tools war ein komplexer Prozess. Es begann mit der Bildung von Arbeitsgruppen, die aus 39 Experten bestanden. Diese kamen aus verschiedenen Bereichen wie Medizin, Statistik und Journalismus. Zunächst wurde eine Übersichtsstudie durchgeführt, um bestehende Bewertungswerkzeuge zu analysieren. Dabei wurden sieben Werkzeuge und zwei methodische Artikel identifiziert. Daraus wurde eine Liste von 42 Kriterien erstellt, die in 11 Bereiche unterteilt wurden.
Anschließend wurden zwei Delphi-Befragungen durchgeführt. Dabei handelt es sich um eine Methode, bei der Experten ihre Meinung anonym abgeben, um einen Konsens zu erreichen. Nach zwei Runden wurden 39 Kriterien ausgewählt, die von den Experten als wichtig eingestuft wurden. Mit Hilfe einer hierarchischen Analyse wurden dann Gewichtungen für die einzelnen Bereiche und Kriterien festgelegt. Die Bereiche „Klinische Fragen“ und „Evidenz“ erhielten die höchsten Gewichtungen, während der Bereich „Sonstiges“ die niedrigste Gewichtung bekam.
Wie wurde das STAR-Tool getestet?
Um sicherzustellen, dass das STAR-Tool zuverlässig und praktisch ist, wurde es an zwei Gruppen von Leitlinien getestet. Die erste Gruppe bestand aus den 50 besten chinesischen Leitlinien aus dem Jahr 2020. Die zweite Gruppe umfasste alle Leitlinien und Konsensaussagen, die 2021 in China veröffentlicht wurden. Die Bewertung wurde von 90 klinischen Bewertern und 35 methodischen Bewertern durchgeführt. Jede Leitlinie wurde unabhängig anhand der STAR-Kriterien bewertet. Die Gesamtpunktzahl wurde durch die gewichtete Summe der einzelnen Kriterien ermittelt.
Wie zuverlässig ist das STAR-Tool?
Die Zuverlässigkeit des STAR-Tools wurde mit dem Cronbach’s Alpha-Koeffizienten gemessen. Dieser Wert lag zwischen 0,078 und 0,902 in den verschiedenen Bereichen, mit einem Durchschnitt von 0,588. Der Bereich „Registrierung“ hatte die höchste Konsistenz, während die Bereiche „Leitliniengruppen“, „Interessenkonflikte“ und „Zugänglichkeit“ die niedrigsten Werte aufwiesen. Die Übereinstimmung zwischen den Bewertern wurde mit dem Cohen’s Kappa-Koeffizienten gemessen. Für methodische Bewerter lag dieser bei 0,774 und für klinische Bewerter bei 0,618. Das zeigt, dass das Tool eine starke Übereinstimmung bietet.
Wie gut ist der Inhalt des STAR-Tools?
Die Inhaltsvalidität wurde mit dem Content Validity Index (CVI) bewertet. Der Gesamt-S-CVI lag bei 0,905, was auf eine gute Inhaltsvalidität hinweist. Die Kriterienvalidität wurde durch den Vergleich der STAR-Bewertungen mit einem zusammengesetzten Score aus drei etablierten Checklisten gemessen. Der Pearson-Korrelationskoeffizient betrug 0,885, was auf eine gute Kriterienvalidität hindeutet.
Wie praktisch ist das STAR-Tool?
Die Praktikabilität des STAR-Tools wurde durch eine Umfrage unter klinischen Bewertern bewertet. Die Bewerter bewerteten die Kriterien auf einer Skala von 1 bis 5. Die durchschnittliche Praktikabilitätsbewertung lag bei 4,6. Kriterium 2 erhielt die höchste Bewertung, während Kriterium 27 die niedrigste Bewertung erhielt. Die mittlere Zeit für die Bewertung einer Leitlinie betrug 20 Minuten. Das zeigt, dass das Tool effizient ist.
Was sind die Vorteile des STAR-Tools?
Das STAR-Tool bietet eine umfassende, zuverlässige und effiziente Methode zur Bewertung von medizinischen Leitlinien. Es deckt wichtige Bereiche wie Wissenschaftlichkeit, Transparenz und Anwendbarkeit ab. Die Entwicklung des Tools erfolgte in einem rigorosen Prozess, der sicherstellt, dass es für eine breite Nutzerschaft geeignet ist. Allerdings könnte die subjektive Festlegung der Gewichtungen die Gesamtbewertung und Rangfolge beeinflussen. Zukünftige Verbesserungen umfassen die Erstellung eines Benutzerhandbuchs und Schulungen, um die Nutzung zu erleichtern.
Fazit
Das STAR-Tool ist ein wichtiger Schritt zur Verbesserung der Qualität von medizinischen Leitlinien. Es bietet eine umfassende und praktische Methode zur Bewertung und kann von verschiedenen Akteuren im Gesundheitswesen genutzt werden. Durch seine Entwicklung und Testung ist es ein zuverlässiges Werkzeug, das dazu beitragen kann, die medizinische Praxis zu standardisieren und die Qualität der Gesundheitsversorgung zu verbessern.
For educational purposes only.
doi.org/10.1097/CM9.0000000000002713