Das QUALIFY-Instrument: Beschreibung und Anleitung
Gütekriterien und ihre Kategorisierung: Übersicht
Relevanz - Wissenschaftlichkeit - Praktikabilität
QUALIFY ist ein Instrument zur strukturierten Bewertung von Qualitätsindikatoren im Gesundheitswesen. Es überprüft, ob diese geeignet sind, Unterschiede in der Versorgungsqualität zuverlässig darzustellen. Das Instrument wurde so konzipiert, dass es in allen Sektoren der Versorgung (ambulante und stationäre Akutversorgung, ambulante und stationäre Rehabilitation, ambulanter und stationärer Pflegebereich) eingesetzt werden kann. Die Notwendigkeit der Entwicklung ergab sich aus der Tatsache, dass ein vergleichbares Instrument bislang international nicht zur Verfügung stand.
Das QUALIFY-Instrument beruht auf 20 Gütekriterien (s. Tabelle 1), mit denen jeweils eine bestimmte Eigenschaft des zu bewertenden Qualitätsindikators gemessen wird.
Tabelle 1: QUALIFY: Gütekriterien und Kategorien
| |
Methodisches Gütekriterium
|
|
Relevanz
|
Bedeutung des mit dem Qualitätsindikator erfassten Qualitätsmerkmals für das Versorgungssystem
|
Nutzen
|
Berücksichtigung potenzieller Risiken / Nebenwirkungen
|
|
Wissenschaftlichkeit
|
Indikatorevidenz
|
Klarheit der Definitionen (des Indikators und seiner Anwendung)
|
Reliabilität
|
Statistische Unterscheidungsfähigkeit
|
Risikoadjustierung
|
Sensitivität
|
| Spezifität |
Validität
|
|
Praktikabilität
|
Verständlichkeit und Interpretierbarkeit für Patienten und interessierte Öffentlichkeit
|
Verständlichkeit für Ärzte und Pflegende
|
Beeinflussbarkeit der Indikatorausprägung
|
Datenverfügbarkeit
|
Erhebungsaufwand
|
Implementationsbarrieren berücksichtigt
|
Die Richtigkeit der Daten kann überprüft werden
|
| Die Vollständigkeit der Daten kann überprüft werden |
Die Vollzähligkeit der Daten kann überprüft werden
|
Einzelne Gütekriterien zeigen Wechselwirkungen untereinander: So ist beispielsweise die Klarheit der Definitionen eine wichtige Voraussetzung für eine hohe Reliabilität eines Qualitätsindikators. Umgekehrt kann bei unklaren Definitionen eine gute Reliabilität nicht erwartet werden. Das QUALIFY-Instrument kann für verschiedene Zielsetzungen eingesetzt werden: Bewertung bereits verwendeter Indikatoren, Unterstützung bei der Neu- und Weiterentwicklung von Indikatoren. Eine praktische Anwendung von QUALIFY war die Identifikation der für die öffentliche Berichterstattung geeigneten Qualitätsindikatoren.
Als Grundlage für eine transparente Bewertung von Qualitätsindikatoren an Hand von QUALIFY stehen für jedes einzelne Gütekriterium folgende Informationen zur Verfügung:
- eine eindeutige Definition des Gütekriteriums
- eine eindeutige Beschreibung des Bewertungsprozesses (Operationalisierung): sie legt alle notwendigen Einzelschritte von der Fragestellung bis zur Auswertung der Ergebnisse fest.
- eine Kernaussage: für jedes Gütekriterium gibt es eine konkrete Aussage, die bewertet wird (Bsp. für das Gütekriterium Risikoadjustierung: "Alle bekannten relevanten Einflussfaktoren auf das Ergebnis des Qualitätsindikators sind berücksichtigt.“).
- Bewertungsstufen: es handelt sich um definierte Bewertungsoptionen zur Kernaussage (z. B. Trifft zu, trifft nicht zu, Enthaltung).
- eine Informationsgrundlage: Die Bewerter erhalten vor der Bewertung neben den Bewertungskriterien strukturierte Materialien, die für die verschiedenen Gütekriterien und Indikatoren sehr unterschiedlich sein können.
Die 20 Gütekriterien sind den Kategorien Relevanz (3 Gütekriterien), Wissenschaftlichkeit (8 Gütekriterien) und Praktikabilität (9 Gütekriterien) zugeordnet (Tabelle 1):
- Die Gütekriterien der Kategorie Relevanz bewerten, ob ein Indikator relevante Qualitätsaspekte der im Fokus der Betrachtung stehenden Versorgung misst. Die Relevanz ist unmittelbar abhängig von dem Setting, in dem die Qualitätsindikatoren eingesetzt werden (z. B. können Qualitätsindikatoren zur Versorgung mit Hüftendoprothesen in Deutschland hoch relevant, in Regionen mit niedriger Lebenserwartung aber irrelevant sein).
- Die Gütekriterien der Kategorie Wissenschaftlichkeit prüfen unmittelbare methodische Eigenschaften eines Qualitätsindikators. Die Bewertung dieser Kriterien ist methodisch begründbar.
- Die Gütekriterien der Kategorie Praktikabilität überprüfen die praktische Anwendbarkeit oder Umsetzbarkeit des Qualitätsindikators in einem konkreten Umfeld.
Die Kategorisierung unterstützt das Verständnis der Einzelkriterien und der Beziehung der Kriterien untereinander. Außerdem lässt sich aus den Kategorien eine sinnvolle Sequenz bei der Bewertung ableiten.
Innovationen 