Wirkungsökonomie Logo Wirkungsökonomie

WÖMS · Kategorie D · Messung, Bewertung und Evidenz

D06 · Datenqualitäts- und Evidenzmatrix

Daten und Evidenz nach Herkunft, Vollständigkeit, Aktualität, Vergleichbarkeit, Prüfbarkeit, Verzerrung und Unsicherheit bewerten.

Was du mitbringst

Inputs

  • Auftrag
  • vorhandene Daten und relevantes Kontextwissen

So gehst du vor

Schritte

  1. Qualitätsdimensionen und Mindestniveaus festlegen.
  2. Quelle und Erhebungsmethode prüfen.
  3. Vollständigkeit, Aktualität und Repräsentativität bewerten.
  4. Vergleichbarkeit und methodische Konsistenz prüfen.
  5. Unsicherheit und Bias dokumentieren.
  6. Freigabe, Abschlag, Ersatzwert oder Datennachforderung entscheiden.

Was herauskommt

Outputs

  • Qualitätsprofil je Indikator samt Freigabestufe, konservativer Behandlung und Verbesserungsplan.

Woran du gute Arbeit erkennst

Qualitätsregeln

  • Empfänger, Systemgrenzen und Referenzrahmen sind eindeutig.
  • Empirische Befunde, Annahmen und normative Bewertungen bleiben unterscheidbar.
  • Ergebnis führt zu einer klaren nächsten Entscheidung oder Lernfrage.
  • Qualitätsmängel führen zu klarer Behandlung.
  • Unsicherheit wird nicht versteckt.
  • Verbesserungsmaßnahmen sind priorisiert.

Die roten Linien

Schutzregeln

Diese Regeln stehen über allem. Eine verletzte Wirkungsgrenze lässt sich nicht durch positive Werte ausgleichen.

  • Ergebnis nicht als endgültige Wahrheit, sondern als versionierte Entscheidungsgrundlage behandeln.
  • Betroffene, negative Wirkungen und Machtasymmetrien dürfen nicht durch Workshopkonsens verschwinden.
  • Ein Gesamtqualitätsscore kann kritische Mängel verdecken.
  • Fehlende Daten nicht automatisch neutral bewerten.

Die Arbeitsfläche

Canvas - Datenqualitäts- und Evidenzmatrix

Eine leere Vorlage mit klaren Leitfragen. Die fünf Pflichtfelder sind immer auszufüllen - sie halten Ehrlichkeit und Nichtkompensation im Blick.

D06 · Datenqualitäts- und EvidenzmatrixFall: Datum: Version: Moderation:
Qualitätsdimensionen und Mindestniveaus festlegenWie wird „Qualitätsdimensionen und Mindestniveaus festlegen“ für den konkreten Fall nachvollziehbar bearbeitet?
Quelle und Erhebungsmethode prüfenWie wird „Quelle und Erhebungsmethode prüfen“ für den konkreten Fall nachvollziehbar bearbeitet?
Vollständigkeit, Aktualität und Repräsentativität bewertenWie wird „Vollständigkeit, Aktualität und Repräsentativität bewerten“ für den konkreten Fall nachvollziehbar bearbeitet?
Vergleichbarkeit und methodische Konsistenz prüfenWie wird „Vergleichbarkeit und methodische Konsistenz prüfen“ für den konkreten Fall nachvollziehbar bearbeitet?
Unsicherheit und Bias dokumentierenWie wird „Unsicherheit und Bias dokumentieren“ für den konkreten Fall nachvollziehbar bearbeitet?
Freigabe, Abschlag, Ersatzwert oder Datennachforderung entscheidenWie wird „Freigabe, Abschlag, Ersatzwert oder Datennachforderung entscheiden“ für den konkreten Fall nachvollziehbar bearbeitet?
EvidenzstatusImmer ausfüllen – auch wenn unbequem.
UnsicherheitImmer ausfüllen – auch wenn unbequem.
Negative WirkungImmer ausfüllen – auch wenn unbequem.
WirkungsgrenzenImmer ausfüllen – auch wenn unbequem.
Offene FragenImmer ausfüllen – auch wenn unbequem.

Ausgefülltes Beispiel folgt. Mehr zum Canvas-Prinzip.

← D05 Alle Methoden D07 →