.jpg){kind=link}
- Yayın
- Güncelleme
Otomatik triyaj ilk örneklerde iyi çalışmış olabilir; daha sonra gelen kayıtların özellikleri değiştiğinde aynı sonuç beklenmemelidir. Yeni dil, daha uzun metin veya farklı merkez uygulaması hata türünü değiştirebilir. Gözetim, yalnız sistem sürümüne değil kullanılan girdiye de bakmalıdır.
Kararın kapsamı
Girdi değişimi her zaman modelin kendisinin değişmesi anlamına gelmez. Önceki değerlendirmede temsil edilmeyen durumlar yeni kullanım kapsamı oluşturabilir. Ekip, hangi özelliklerin karar açısından önemli olduğunu ve bunlar değiştiğinde hangi insan incelemesinin yapılacağını kullanım amacıyla ilişkilendirmelidir.
Örnek inceleme
Örneğin triyaj sistemi kısa İngilizce notlarla değerlendirilmiştir. Yeni merkezlerden uzun ve iki dilli notlar gelmeye başlar. Genel doğruluk göstergesi değişmez görünür fakat önemli konuların bir kısmı düşük önceliğe düşer. Ekip yeni alt grubu ayrı inceler, uygun kullanım sınırını ve ek kontrolü belirler.
Uygulama kontrolleri
- Yeni girdileri önceki değerlendirmede temsil edilen özelliklerle karşılaştırın.
- Önemli hata türlerini dil, uzunluk veya kaynak grubuna göre inceleyin.
- Kapsam dışı girdiler için uygun insan yönlendirmesini görünür tutun.
Kabul ve sınırlar
Kabul, mevcut kullanım grubunu destekleyen yeterli kanıt ve açık sınırlar gerektirir. Eski başarılı test, yeni girdilere sınırsız güvence sağlamaz. İzleme sonucu sorun gösterirse otomatik kararın kullanımını sınırlama veya durdurma yetkisi ve sorumluluğu önceden açıklanmış olmalıdır.
Sık sorulan sorular
- Sistem değişmediyse yeniden değerlendirme gerekir mi?
- Gerekebilir. Kullanım bağlamı ve girdi özellikleri de sonucun güvenilirliğini etkiler.
- Genel doğruluk oranı yeterli mi?
- Tek başına değil. Kritik yanlış önceliklendirme belirli bir alt grupta gizlenebilir.