- Veröffentlicht
- Aktualisiert
Ein Algorithmus zur Fragebogenauswertung kann sich ändern, während die Teilnehmerantworten unverändert bleiben. Wird nur der Zahlenwert aufbewahrt, können Prüfende möglicherweise die verwendete Regel oder Abweichungen zwischen zu unterschiedlichen Zeiten erzeugten Berichten nicht erklären.
Die Bedeutung der Daten erhalten
Verknüpfen Sie Quellantworten, den Umgang mit fehlenden Items, invers kodierte Items und die Auswertungsversion. Softwareteams können eine Berechnung korrekt implementieren, während ihre wissenschaftliche Eignung ein getrenntes fachliches Urteil bleibt. Entscheiden Sie ausdrücklich, ob historische Werte nach einer Aktualisierung neu berechnet werden. Führen Sie Ergebnisse mit unterschiedlichen Definitionen nicht so zusammen, als sei ihre Bedeutung automatisch identisch.
Ausgearbeitetes Beispiel
Beispielsweise ändert ein Algorithmus seinen Umgang mit einem fehlenden Item. Datensätze, die zuvor keinen Auswertungswert ergaben, erhalten nun numerische Ergebnisse. Das Team vergleicht Beispiele mit fehlenden Angaben an unterschiedlichen Positionen mit unabhängig erwarteten Berechnungen. Es dokumentiert, wo überarbeitete Werte in Berichte eingehen und ob die Regel rückwirkend gilt. Eine funktionierende Anwendungsansicht ist kein ausreichender Abnahmenachweis.
Prüfpunkte
- Verwenden Sie kleine Beispiele, die gezielt inverse Kodierung und fehlende Items prüfen.
- Verfolgen Sie jeden Auswertungswert zu Quellantworten und Algorithmusversion zurück.
- Unterscheiden Sie neu berechnete Ergebnisse von solchen, die nach früheren Regeln erzeugt wurden.
Abnahme und Grenzen
Abnahme bedeutet, dass die Definition des Auswertungswerts und seine Eingaben rekonstruierbar sind. Technische Korrektheit allein belegt nicht die klinische Validität eines Messinstruments. Bewerten Sie die Eignung und Nutzungsbedingungen maßgeblicher Auswertungsmaterialien getrennt. Eine Versionsänderung als Fehlerkorrektur zu bezeichnen, beseitigt nicht die Notwendigkeit, wissenschaftliche und analytische Folgen für betroffene Studienausgaben zu berücksichtigen.
Häufig gestellte Fragen
- Sollten identische Antworten einen identischen Auswertungswert ergeben?
- Unter derselben abgenommenen Regel ja; ändert sich die Regel, erläutern Sie den Unterschied und seinen Verwendungszweck.
- Darf ein früherer Auswertungswert überschrieben werden?
- Erhalten Sie die Begründung der Neuberechnung und die Versionsbeziehung, statt das frühere Ergebnis ohne Erklärung verschwinden zu lassen.