.jpg){kind=link}
- Pubblicazione
- Aggiornamento
Il triage automatico può funzionare bene sugli esempi iniziali, ma non si dovrebbe presumere lo stesso risultato quando cambiano le registrazioni in arrivo. Una nuova lingua, testi più lunghi o pratiche diverse dei centri possono modificare i tipi di errore. La supervisione dovrebbe esaminare gli input utilizzati oltre alla versione del sistema.
Ambito della decisione
Un cambiamento degli input non significa necessariamente che sia cambiato il modello stesso. Situazioni assenti dalla valutazione originale possono costituire un ambito d’uso diverso. Collegare alla decisione prevista le caratteristiche pertinenti degli input e le revisioni umane attivate dal loro cambiamento.
Esempio di revisione
Per esempio, un sistema di triage è stato valutato usando note brevi in inglese. Nuovi centri iniziano a fornire registrazioni lunghe e bilingui. L’accuratezza complessiva appare invariata, ma alcuni problemi importanti ricevono bassa priorità. Il gruppo esamina separatamente quel sottogruppo e definisce un limite d’uso appropriato e un controllo aggiuntivo.
Controlli pratici
- Confrontare i nuovi input con le caratteristiche rappresentate nella valutazione precedente.
- Esaminare gli errori importanti per lingua, lunghezza o gruppo fonte quando pertinente.
- Mantenere visibile l’instradamento umano appropriato per input esterni all’ambito supportato.
Accettazione e limiti
L’accettazione richiede evidenze adeguate per il gruppo attuale di input e limiti espliciti. Prove storiche riuscite non offrono garanzie illimitate per registrazioni diverse. Definire in anticipo responsabilità e autorità per limitare o interrompere il supporto decisionale automatico quando il monitoraggio identifica un problema.
Domande frequenti
- Serve una rivalutazione se il sistema non è cambiato?
- Può servire. Anche caratteristiche degli input e contesto d’uso possono influire sull’affidabilità.
- Una percentuale complessiva di accuratezza basta?
- Non da sola. Errori importanti nell’assegnazione della priorità possono restare nascosti in un sottogruppo.