2種類の誤りとそれぞれに伴うコスト：偽陽性（誤検出）と見逃しのバランスを取る

概要

すべての検査工程では、二種類の誤りが生じます。一つは、実際に存在する欠陥を見逃すこと、もう一つは、問題のない部品を不良と誤って判定することです。これら二つの誤りは、同じ判定閾値によって生じており、この閾値を変更すれば、一方を減らすと他方が増えるというトレードオフ関係にあります。つまり、「両方の誤りを極めて小さくせよ」という仕様要件は、単に「より優れた機械」を求めているのではなく、現実には存在し得ない機械を要求しているにすぎません。

しかし、このトレードオフを現実的に管理できるのは、二つの誤りが通常、まったく異なるコストを伴うからです。たとえば、安全性に関わる部品で欠陥を見逃せば、リコールに至る可能性があり巨額のコストが発生しますが、誤検出の場合は、大抵の場合、数分間の再検査で済む程度のコストで済みます。こうしたコストの差が桁違いに大きい場合、最適な閾値設定は自明であり、仕様書には「両方の数値を小さくせよ」と無理な要求をするのではなく、そのコスト差に応じた明確な設定基準を記載すべきです。

本稿では、この2種類のエラーがどのように関係し合うか、それぞれの実際のコストはどれほどか、また、どのエラーを検出できるかを明記した仕様書を作成する方法について説明します。ビッグバード・インダストリアル社（旧島田ビッグバード・インダストリアル社）は、2001年より自動車用パワートレイン部品向けの洗浄・バリ取り装置の製造を手掛けており、本稿で用いる検出率の数値は、実際の生産ラインの検査工程から得られたものです。

1．2種類のエラー

用語の整理をしておく価値があります。というのも、この2種類のエラーは、異なる人が同一の言葉で説明することがよくあるからです。

見逃し（ミス）

部品に欠陥があるにもかかわらず、それが検出されず、その部品がそのまま製造ラインを通過してしまう状態です。見逃し率とは、欠陥のある部品のうち実際に通過してしまう割合を指し、実際の検査工程では、一般的に1,000個に1個程度と定められることが多く、特に厳格な用途では10,000個に1個まで引き下げられます。

誤検出（フェイズコール）

適合する部品はフラグが立てられ、検査・再加工・廃棄のためにラインから外れます。実際の表面における誤検出率（フェイズコール率）は、欠陥の種類や表面の状態によって異なり、おおよそ1～7％の範囲です。ゼロ％を報告している工程では、通常、要求仕様よりも容易な項目を測定していることになります。

2．なぜ両者は連動するのか

検出器は、信号を所定のしきい値と比較することで判定を行います。このしきい値を下げると、より多くの欠陥を検出できる一方で、良品もより多く誤って検出されてしまいます。これは、良品の信号分布と欠陥品の信号分布が、検出器が測定する特徴量において重なり合うためです。

この重なりは物理的なものである

この重なりは、より優れたアルゴリズムによって解消可能なモデルの不備ではありません。浅い傷と工具痕は同程度のコントラストを生じ、小さな気孔と塵粒子は同程度の暗さを示します。両者の分布が実際に重なる領域では、いかなるしきい値を設定しても完全に分離することはできず、検出率と誤検出率の両方を向上させる唯一の方法は、「何を測定するか」を変えることです。つまり、しきい値の位置を調整するのではなく、測定対象そのものを変更する必要があります。

測定対象を変える

2番目の照明、2番目の視点、あるいは空気パルスを追加することで、単一の測定では分離できない検出対象を分離できます。これは、検出率と偽陽性率の両方を向上させる正当な方法であり、ソフトウェアのチューニングではなく、ハードウェアの変更によるものです。

3．各エラーがもたらすコスト

これらのコストは非対称であり、それぞれを数値化することが、単なるトレードオフから明確な意思決定へと転換する鍵となります。

見逃しのコスト

見逃された欠陥は工程を進んでいきます。機械加工部品の場合、組立工程で発見され、ライン停止というコストが生じます。安全関連部品の場合は、製品が市場に出回った後に発覚し、リコールという高コストに直結します。欠陥が工程上で進むほど、そのコストは増大するため、見逃し率は、欠陥を最も低コストで検出できる工程で規定されます。

誤検出のコスト

誤検出は、検査回数、再検査、または再作業を消費します。また、信頼性も損ないます。つまり、良品が繰り返し不合格と判定されるのを見てきたオペレーターは、その検査工程をスキップするよう学習してしまいます。そして、スキップされた検査工程は、まったく保護機能を果たさなくなります。この2つ目のコストこそ、計算には一切反映されない一方で、結果には必ず現れるものなのです。

4．適切な判定バランスの位置

適切なバランスは、2つのコストの比率から導き出され、通常その比率は非常に大きい。

見逃しが重大な場合

検査順序の確認、安全面や油圧通路などでは、見逃しが現場での故障やリコールにつながる可能性がある。そのため、該当工程では、誤検出率を高めることを許容してでも、明確に「拒否」寄りの判定バランスをとるべきである。ベアリングキャップの検査工程で、見逃し率が1万分の1、誤検出率が100分の1となっている場合、これは適切なバランス設定である。

誤検出がより大きなコストとなる場合

大量生産される外観面（外装面）の検査では、誤検出により毎シフトごとに部品が研磨工程へ送られ、その累積コストが検出された不良品の価値を上回ってしまうことがある。このような工程では、判定バランスをより中立的に調整するため、塗装検査工程では、安全検査と比べて見逃し率は低く、誤検出率は高くなる。

5．両方の測定

検査ステーションは、2つの数値で特徴づけられます。サプライヤーがそのうち1つだけを提示する場合、ステーションの半分しか説明していません。

検証用データセットには、両方が含まれている必要があります

不良品のみからなるテストセットでは「見逃し率」を測定します。一方、良品のみからなるテストセットでは「誤検出率」を測定します。後者がなければ、すべての部品を不合格とするステーションでも、前者の指標では完璧なスコアを記録してしまうことになります。そのため、受入試験には通常の生産部品も含める必要があります。

引渡し時ではなく、稼働中の測定

ランプの劣化や部品のばらつき変化などにより、設備の本格稼働後に両方の率は変動します。100個あたりのフラグ数と、1,000個あたりの確認済み欠陥数を継続的に追跡することで、ステーションがバイパスされる前に性能のずれを把握できます。

6．組織的な側面

技術的な課題は問題の半分にすぎません。残りの半分は、組織がこれらのフラグをどう活用・対応するかにあります。

承認権限を持つ者がフラグを確認する検査工程は信頼される。一方、誰も確認しないキューにフラグが滞留する工程は、無視されることになる。一度無視されると、誤検出率はコストではなく習慣と化してしまう。したがって、確認作業の担当ポジションは、単なる管理上の細目ではなく、エラー許容範囲（エラーバジェット）の一部である。

7．仕様書への記載

両方の率（見逃し率と誤検出率）を明記し、どちらの率を変動させることを許容するかを定め、それらを測定するためのテストセットを明確に定義した仕様書こそが、サプライヤーが設計対象として扱える仕様書である。

両率ともに最小化を要求する仕様書には、実際には工場のラインではなく実験室の環境を想定した数値が提示されるだろう。真に問うべきは、「理論上達成可能な最低の見逃し率は何か」ではなく、「アプリケーションが求める見逃し率は何か」と「その見逃し率を維持しつつ、ラインが許容できる誤検出率はどれほどか」である。

8．誰も使わない検査工程のコスト

誤差予算における最大のコストは、見逃しでも偽陽性でもありません。それは、検査ステーションが使われなくなることです。なぜなら、その時点で見逃し率は、検査を行わなかった場合の工程そのものの不良発生率に等しくなってしまうからです。

検査ステーションが使われなくなるまでの経緯

これは三段階で進行します。まず、偽陽性率がラインが許容できる水準を上回り、作業員が良品に対しても拒否されることが日常化します。次に、誰も即座にフラグ付き部品を承認・出荷する権限を持たないため、審査待ちのキューが膨らみます。やがて誰かが「オーバーライド（強制通過）」機能を発見し、以降は判断が難しい部品はすべて手動で通過させられるようになります。これらの各ステップは、いずれも意思決定ではなく、現場の圧力に対する自然な反応です。

対策は技術的ではなく、組織的なものです。すなわち、明確に指名された審査担当者を置き、審査完了までの目標時間と、当該ステーションが月間でどの程度バイパスされたかを示す数値を定めることです。信頼され、定期的に審査されているステーションであれば、ラインが許容する範囲内の偽陽性率で運用できます。一方、頻繁にバイパスされるステーションには、測定する価値のある誤検出率など存在しません。

よくあるご質問

一つのステーションで、両方の誤検出率（見逃し率・偽陽性率）をともに低く保つことは可能でしょうか？

欠陥と背景が光学的に重ならない場合にのみ適用されます。重なる場合は、閾値の調整ではなく、別の照明や視点など、追加の情報を導入することで両方の性能を向上させる必要があります。

どの率から設定すればよいですか？

まず見逃し率を設定します。これは、欠陥が後工程で引き起こす可能性のある影響に基づいて定められます。誤検出率は、その見逃し率を達成しつつ、ラインが許容できる範囲内で決まります。

なぜ誤検出率が高そうに見えるのですか？

実際の生産面（鋳造品や塗装パネルなど）における実際のばらつきを用いて測定しているためです。鋳造品や塗装パネルでは、一桁台前半の誤検出率が通常であり、ゼロと報告される場合は、テストセットが単純すぎたことを示していることが多いです。

オペレーターが検査ステーションを無視してしまった場合はどうなりますか？

それが真の故障モードです。未確認のアラートキューの蓄積や、ラインが許容できないほど高い誤検出率が原因で、本来機能するはずのステーションが単なる記録作業と化してしまいます。

まとめ

誤検出と見逃しは、同じしきい値によって生じるものであり、それぞれにかかるコストは大きく異なります。実用的な仕様では、どちらか一方を許容できるかどうかを明記すべきであり、両方を小さくすることを要求するべきではありません。

両方を同時に改善することは、チューニングの問題ではなく、ハードウェアの問題です。そして、最終的に重要なのは運用中に測定される率です。なぜなら、誰も信頼しない監視ステーションの見逃し率は100％になるからです。