Due errori, due costi: bilanciare le chiamate errate rispetto ai mancati rilevamenti

Panoramica

Ogni postazione di ispezione commette due tipi di errore: non rileva un difetto effettivamente presente e segnala come difettoso un componente che è invece integro. Entrambi gli errori derivano dalla stessa soglia di decisione, e spostare tale soglia comporta un compromesso tra i due: ridurre l’uno implica aumentare l’altro. Una specifica che richiede entrambi i valori molto bassi non chiede una macchina migliore; chiede una macchina che non esiste.

Ciò che rende gestibile questo compromesso è che i due errori raramente hanno lo stesso costo. Un difetto non rilevato su un componente di sicurezza può causare un richiamo; un falso allarme comporta generalmente pochi minuti di nuova ispezione. Quando i costi differiscono di ordini di grandezza, la regolazione corretta è evidente, e la specifica dovrebbe indicarla esplicitamente, anziché pretendere che entrambi i valori siano contenuti.

Questo articolo illustra come interagiscono i due tassi, quanto costa ciascuno nella pratica e come redigere una specifica che indichi quale errore la linea è in grado di assorbire. Big Bird Industrial (in precedenza Shimada Big Bird Industrial) costruisce sistemi per la pulizia e la sbavatura di componenti del powertrain automobilistico dal 2001, e le cifre di rilevamento qui riportate provengono da stazioni di produzione.

1. I due errori

È opportuno chiarire la terminologia, poiché i due errori vengono spesso descritti con le stesse parole da persone diverse.

Un mancato rilevamento

Un difetto presente sul pezzo non viene rilevato e il pezzo prosegue lungo la linea. Il tasso di mancati rilevamenti è la frazione di pezzi difettosi che passano indisturbati; le stazioni di produzione lo specificano comunemente nell’ordine di un pezzo su mille, mentre le applicazioni più stringenti raggiungono un pezzo su diecimila.

Un falso allarme

Un componente conforme viene contrassegnato e lascia la linea per essere esaminato, riparato o scartato. I tassi di falsi allarmi su superfici reali variano approssimativamente dall’uno al sette per cento, a seconda della classe di difetto e della superficie; una stazione che riporta zero falsi allarmi sta solitamente misurando qualcosa di più semplice rispetto al requisito.

2. Perché si muovono insieme

Un rilevatore decide confrontando un segnale con una soglia. Abbassare la soglia consente di rilevare più difetti, ma comporta anche il contrassegno di un numero maggiore di componenti buoni, poiché la popolazione dei componenti buoni si sovrappone a quella dei difetti nella caratteristica misurata dal rilevatore.

La sovrapposizione è fisica

Questa sovrapposizione non è una debolezza del modello eliminabile con un algoritmo migliore. Un graffio superficiale e un segno lasciato da uno strumento producono un contrasto simile; una piccola porosità e una particella di polvere producono un’analoga intensità di scurimento. Là dove le due popolazioni si sovrappongono effettivamente, nessuna soglia riesce a separarle in modo perfetto, e l’unico modo per migliorare contemporaneamente entrambe le prestazioni consiste nel modificare ciò che viene misurato, anziché spostare la posizione della soglia.

Modificare ciò che viene misurato

L’aggiunta di una seconda illuminazione, di una seconda visione o di un impulso d’aria può separare popolazioni che una singola misurazione non riesce a distinguere. Questo è l’approccio legittimo per migliorare entrambi i tassi ed è un intervento hardware, non un semplice aggiustamento.

3. Il costo di ciascun errore

I costi sono asimmetrici e la loro quantificazione trasforma il compromesso in una decisione.

Il costo di un falso negativo

Un difetto non rilevato prosegue lungo la catena produttiva. Su un componente lavorato meccanicamente potrebbe essere individuato in fase di assemblaggio, con conseguente arresto della linea; su un componente di sicurezza potrebbe raggiungere il mercato, causando un richiamo. Più avanza lungo il processo, maggiore diventa il costo: per questo il tasso di falsi negativi è specificato all’operazione in cui il difetto è più economico da rilevare.

Il costo di un falso positivo

Una chiamata falsa consuma una revisione, una nuova ispezione o un intervento correttivo. Consuma inoltre la fiducia: un operatore che vede ripetutamente pezzi buoni scartati impara a bypassare la stazione, e una stazione bypassata non offre alcuna protezione. Questo secondo costo non compare mai nei calcoli, ma è sempre presente nei risultati.

4. Dove dovrebbe trovarsi l'equilibrio

L'equilibrio corretto deriva dal rapporto tra i due costi, e tale rapporto è solitamente elevato.

Quando l'errore è catastrofico

In un controllo di sequenza, su una superficie di sicurezza o su un condotto idraulico, un errore può trasformarsi in un guasto in campo e in un richiamo. La stazione deve essere fortemente orientata al rigetto, accettando un tasso più elevato di falsi allarmi come prezzo da pagare. Una stazione per coperchi dei cuscinetti che opera con un errore ogni diecimila pezzi e un falso allarme ogni cento pezzi è correttamente bilanciata.

Quando il falso allarme rappresenta il costo maggiore

Su una superficie estetica ispezionata ad alto volume, un falso allarme invia un componente alla lucidatura a ogni turno, e il costo accumulato può superare il valore dei difetti individuati. Queste stazioni sono regolate più vicino all'equilibrio, motivo per cui una stazione per verniciatura opera con un tasso di errori inferiore e un tasso di falsi allarmi superiore rispetto a un controllo di sicurezza.

5. Misurazione di entrambi

Una stazione è caratterizzata da due numeri e un fornitore che ne cita uno ne descrive solo la metà.

L’insieme di validazione deve includere entrambi

Un insieme di test composto da parti difettose misura il tasso di mancato rilevamento. Un insieme di test composto da parti conformi misura il tasso di falsi allarmi. Senza quest’ultimo, una stazione che scarta tutto ottiene un punteggio perfetto sul primo, motivo per cui il test di accettazione deve includere anche parti prodotte normalmente.

Misurazione in esercizio anziché al momento della consegna

Entrambi i tassi variano dopo la messa in servizio, poiché le lampade invecchiano e la popolazione di parti cambia. Monitorare le segnalazioni ogni cento parti e i difetti confermati ogni mille parti consente di rilevare tale deriva prima che la stazione venga esclusa.

6. La metà organizzativa

L’aspetto tecnico rappresenta solo la metà del problema. L’altra metà riguarda ciò che l’organizzazione fa con le segnalazioni.

Una stazione le cui segnalazioni vengono esaminate da qualcuno autorizzato a rilasciare un componente sarà considerata affidabile. Una stazione le cui segnalazioni vanno in una coda che nessuno smista verrà ignorata e, una volta ignorata, il tasso di falsi allarmi smetterà di rappresentare un costo per diventare invece un’abitudine. La posizione dedicata alla revisione fa quindi parte del budget di errore, non di un dettaglio amministrativo.

7. Inserire il tutto in una specifica

Una specifica che indica entrambi i tassi, chiarisce quale dei due può variare e definisce gli insiemi di test con cui misurarli è una specifica contro la quale un fornitore può progettare.

Una specifica che richiede che entrambi i tassi siano minimi riceverà in risposta un valore che descrive un laboratorio, non una linea di produzione. La domanda più utile non è quale sia il tasso minimo di mancati rilevamenti raggiungibile, bensì quale tasso di mancati rilevamenti l’applicazione richiede e quale tasso di falsi allarmi la linea può tollerare mantenendo tale livello.

8. Il costo di una stazione che nessuno utilizza

Il costo maggiore nel budget di errore non è né il mancato rilevamento né la falsa chiamata. È la stazione che smette di essere utilizzata, perché a quel punto il tasso di mancati rilevamenti diventa semplicemente quello prodotto dal processo in assenza di ispezione.

Come una stazione smette di essere utilizzata

Avviene in tre passaggi. Il tasso di falsa chiamata sale oltre quanto la linea possa assorbire, quindi gli operatori cominciano ad aspettarsi il rigetto di pezzi buoni. La coda delle revisioni si allunga perché nessuno ha l’autorità per rilasciare rapidamente un pezzo segnalato. Qualcuno scopre la funzione di override e, da quel momento in poi, ogni pezzo ambiguo viene approvato manualmente. Nessuno di questi passaggi è una decisione; ognuno è una risposta alla pressione.

La contromisura è organizzativa, non tecnica: un revisore designato con autorità esplicita, un tempo obiettivo per la revisione e una cifra mensile relativa alla frequenza con cui la stazione è stata aggirata. Una stazione sottoposta a revisione e ritenuta affidabile può operare con un tasso di falsa chiamata tollerato dalla linea. Una stazione aggirata non ha alcun tasso di errore degno di misurazione.

Domande frequenti

Una stazione può avere entrambi i tassi bassi?

Solo quando il difetto e lo sfondo non si sovrappongono otticamente. Quando invece si sovrappongono, migliorare entrambi richiede l’aggiunta di informazioni, ad esempio un’altra illuminazione o un altro punto di vista, anziché regolare una soglia.

Quale tasso devo specificare per primo?

Il tasso di mancato rilevamento, perché è determinato dalle conseguenze che il difetto potrebbe causare a valle. Il tasso di falsi allarmi deriva invece dalla capacità della linea di assorbirlo pur raggiungendo tale obiettivo.

Perché i tassi di falsi allarmi sembrano elevati?

Perché vengono misurati su superfici produttive reali, con variazioni reali. Un tasso compreso nelle unità semplici su una fusione o su un pannello verniciato è normale; un tasso riportato come zero indica solitamente che il set di test era troppo facile.

E se gli operatori ignorano la stazione?

Questo è il vero modo di guasto. È causato da una coda di segnalazioni non revisionata o da un tasso di falsi allarmi che la linea non riesce a gestire, trasformando così una stazione funzionante in un semplice esercizio di registrazione dati.

Conclusione

Un errore di mancata rilevazione e un falso allarme sono generati dalla stessa soglia e hanno costi molto diversi. La specifica utile indica quale dei due il sistema può permettersi, anziché richiedere che entrambi siano ridotti al minimo.

Migliorare contemporaneamente entrambi è una questione legata all’hardware, non alla taratura. E il tasso che alla fine conta è quello misurato in condizioni operative, perché una stazione sulla quale nessuno ha fiducia ha un tasso di mancate rilevazioni pari al cento per cento.