Dois Erros, Dois Custos: Equilibrar Chamadas Falsas Contra Não-Detecções

Visão Geral

Cada estação de inspeção comete dois tipos de erro: omite um defeito que está presente e sinaliza incorretamente uma peça boa. Ambos resultam do mesmo limiar, e ajustar esse limiar implica trocar um erro pelo outro. Uma especificação que exige que ambos os erros sejam muito baixos não está pedindo uma máquina melhor; está pedindo uma máquina que não existe.

O que torna essa troca gerenciável é que os dois erros raramente têm o mesmo custo. Um defeito omitido em um componente de segurança pode acarretar uma campanha de recall; uma chamada falsa normalmente custa apenas alguns minutos de reinspeção. Quando os custos diferem em ordens de grandeza, o ajuste correto é evidente, e a especificação deveria indicá-lo explicitamente, em vez de exigir que ambos os valores sejam pequenos.

Este artigo explica como as duas taxas interagem, qual é o custo prático de cada uma e como redigir uma especificação que indique qual erro a linha pode absorver. A Big Bird Industrial (anteriormente Shimada Big Bird Industrial) constrói sistemas de limpeza e desbaste para componentes do trem de força automotivo desde 2001, e os dados de detecção aqui utilizados provêm de estações de produção.

1. Os dois erros

Vale a pena padronizar a terminologia, pois as duas falhas costumam ser descritas com as mesmas palavras por diferentes pessoas.

Um erro de não detecção

Um defeito presente na peça não é detectado, e a peça prossegue na linha. A taxa de erro de não detecção corresponde à fração de peças defeituosas que passam, e as estações de produção normalmente a especificam na ordem de uma peça em mil, atingindo, nas aplicações mais rigorosas, uma em dez mil.

Um falso alarme

Uma peça conforme é sinalizada e sai da linha para revisão, retrabalho ou descarte. As taxas de falsos positivos em superfícies reais variam entre aproximadamente um e sete por cento, dependendo da classe de defeito e da superfície; uma estação que relata zero normalmente está medindo algo mais fácil do que o exigido.

2. Por Que Eles Se Movem Juntos

Um detector decide comparando um sinal com um limiar. Reduzir o limiar detecta mais defeitos, mas também sinaliza mais peças boas, pois a população de peças boas se sobrepõe à população de defeitos na característica que o detector mede.

A Sobreposição É Física

Essa sobreposição não é uma fraqueza de modelagem que um algoritmo melhor possa eliminar. Um arranhão raso e uma marca de ferramenta produzem contraste semelhante; um poro pequeno e uma partícula de poeira produzem escuridão semelhante. Onde as duas populações realmente se sobrepõem, nenhum limiar as separa perfeitamente, e a única forma de melhorar ambos os parâmetros é alterar o que é medido, em vez de mudar onde a linha de decisão é traçada.

Alterar o Que É Medido

Adicionar uma segunda iluminação, uma segunda visualização ou um pulso de ar pode separar populações que uma única medição não consegue distinguir. Esse é o método legítimo para melhorar ambas as taxas, e trata-se de uma alteração no hardware, não de um ajuste fino.

3. O custo de cada erro

Os custos são assimétricos, e quantificá-los é o que transforma a compensação em uma decisão.

O custo de um erro de omissão

Um defeito não detectado se propaga. Em um componente usinado, pode ser identificado durante a montagem, cujo custo é a paralisação da linha; em um componente de segurança, pode chegar ao campo, cujo custo é uma campanha de recall. Quanto mais longe ele se propaga, maior se torna o custo, razão pela qual a taxa de erros de omissão é especificada na operação onde o defeito é mais barato de ser detectado.

O custo de um falso alarme

Uma chamada falsa consome uma revisão, uma reinspeção ou um retrabalho. Também consome confiança: um operador que vê peças boas rejeitadas repetidamente aprende a contornar a estação, e uma estação contornada não oferece nenhuma proteção. Esse segundo custo é aquele que nunca consta nos cálculos, mas sempre está presente no resultado.

4. Onde o equilíbrio deve estar posicionado

O equilíbrio correto decorre da razão entre os dois custos, e essa razão normalmente é elevada.

Quando o erro de detecção é catastrófico

Numa verificação de sequência, numa superfície de segurança ou num canal hidráulico, um erro de detecção pode resultar numa falha em campo e num recall. A estação deve ser fortemente inclinada para a rejeição, aceitando uma taxa mais elevada de falsos alarmes como preço a pagar. Uma estação de tampas de mancal operando com um erro de detecção a cada dez mil peças e um falso alarme a cada cem peças está corretamente inclinada.

Quando o falso alarme representa o custo maior

Numa superfície cosmética inspecionada em grande volume, um falso alarme envia uma peça para polimento em todos os turnos, e o custo acumulado pode superar o valor dos defeitos detectados. Essas estações são ajustadas mais próximas do equilíbrio, razão pela qual uma estação de pintura opera com uma taxa de erros de detecção mais baixa e uma taxa de falsos alarmes mais alta do que uma verificação de segurança.

5. Medição de Ambos

Uma estação é caracterizada por dois números e um fornecedor que cita apenas um está descrevendo metade dela.

O Conjunto de Validação Deve Conter Ambos

Um conjunto de teste com peças defeituosas mede a taxa de falhas. Um conjunto de teste com peças conformes mede a taxa de falsos alarmes. Sem este segundo, uma estação que rejeita tudo obtém pontuação perfeita no primeiro, razão pela qual o teste de aceitação deve incluir peças normais de produção.

Medição em Operação, em vez de na Entrega

Ambas as taxas se alteram após a comissionamento, à medida que as lâmpadas envelhecem e a população de peças muda. O acompanhamento de bandeiras por cem peças e de defeitos confirmados por mil peças é o que revela essa deriva antes de a estação ser contornada.

6. A Metade Organizacional

O aspecto técnico representa apenas metade do problema. A outra metade é o que a organização faz com as bandeiras.

Uma estação cujas bandeiras forem analisadas por alguém com autoridade para liberar uma peça será considerada confiável. Uma estação cujas bandeiras forem enviadas para uma fila que ninguém limpa será ignorada, e, uma vez ignorada, a taxa de falsos alarmes deixa de ser um custo e passa a ser um hábito. A posição de análise é, portanto, parte do orçamento de erros, não um detalhe administrativo.

7. Incorporando Isso em uma Especificação

Uma especificação que nomeia ambas as taxas, declara qual delas pode variar e define os conjuntos de testes que as medem é uma especificação contra a qual um fornecedor pode projetar.

Uma especificação que exige que ambas sejam mínimas será respondida com um número que descreve um laboratório, e não uma linha de produção. A pergunta realmente relevante não é qual é a menor taxa de falhas atingível, mas sim qual taxa de falhas a aplicação necessita e qual taxa de falsos alarmes a linha consegue absorver mantendo-a.

8. O Custo de uma Estação que Ninguém Usa

O maior custo no orçamento de erros não é nem a falha de detecção nem a falsa detecção. É a estação que deixa de ser utilizada, pois, nesse momento, a taxa de falhas de detecção passa a ser aquela que o processo gera sem inspeção.

Como uma Estação Deixa de Ser Utilizada

Isso ocorre em três etapas. A taxa de falsas detecções aumenta acima do que a linha consegue absorver, de modo que os operadores começam a esperar rejeições de peças boas. A fila de revisão cresce porque ninguém tem autoridade para liberar rapidamente uma peça sinalizada. Alguém descobre a função de anulação, e, a partir daí, toda peça ambígua é aprovada manualmente. Nenhuma dessas etapas é uma decisão; cada uma é uma resposta à pressão.

A contramedida é organizacional, e não técnica: um revisor nomeado com autoridade, um tempo-alvo para revisão e um número mensal de vezes em que a estação foi contornada. Uma estação que é revisada e confiável pode operar com uma taxa de falsas detecções que a linha tolera. Uma estação que é contornada não tem uma taxa de erro digna de medição.

Perguntas frequentes

Uma Estação Pode Ter Ambas as Taxas Baixas?

Apenas onde o defeito e o fundo não se sobrepõem opticalmente. Quando se sobrepõem, melhorar ambos exige adicionar informação, como outra iluminação ou ângulo de visão, em vez de ajustar um limiar.

Qual Taxa Devo Especificar Primeiro?

A taxa de falhas não detectadas, porque é definida pelo impacto que o defeito pode causar a jusante. A taxa de falsos alarmes resulta da capacidade que a linha tem de absorvê-la enquanto a atinge.

Por Que as Taxas de Falsos Alarmes Parecem Altas?

Porque são medidas em superfícies reais de produção, com variação real. Uma taxa nos dígitos simples baixos em uma peça fundida ou em um painel pintado é normal, e uma taxa relatada como zero geralmente significa que o conjunto de testes foi demasiado fácil.

E Se os Operadores Ignorarem a Estação?

Esse é o modo real de falha. É causado por uma fila de alertas não revistos ou por uma taxa de falsos alarmes que a linha não consegue absorver, transformando uma estação funcional num mero exercício de registro.

Conclusão

Um erro de detecção e um falso alarme são gerados pelo mesmo limiar e têm custos muito diferentes. A especificação útil indica qual desses dois a linha pode suportar, em vez de exigir que ambos sejam pequenos.

Melhorar ambos simultaneamente é uma questão de hardware, não de ajuste. E a taxa que, no final, realmente importa é aquela medida durante a operação, pois uma estação em que ninguém confia tem uma taxa de erros de detecção de cem por cento.