สองประเภทของข้อผิดพลาด สองต้นทุน: การสมดุลระหว่างการแจ้งเตือนเท็จกับการไม่พบข้อบกพร่อง

ภาพรวม

สถานีตรวจสอบแต่ละแห่งก่อให้เกิดความผิดพลาดสองประเภท คือ ล้มเหลวในการตรวจจับข้อบกพร่องที่มีอยู่จริง และระบุชิ้นส่วนที่ดีว่ามีข้อบกพร่อง ความผิดพลาดทั้งสองประเภทนี้เกิดจากค่าเกณฑ์เดียวกัน และการปรับเปลี่ยนค่าเกณฑ์นั้นจะส่งผลให้หนึ่งในสองประเภทเพิ่มขึ้นขณะอีกประเภทลดลง ข้อกำหนดที่เรียกร้องให้ทั้งสองค่าต่ำมากนั้น ไม่ได้หมายถึงการเรียกร้องเครื่องจักรที่ดีกว่า แต่เป็นการเรียกร้องเครื่องจักรที่ไม่มีอยู่จริง

สิ่งที่ทำให้การปรับสมดุลระหว่างความผิดพลาดทั้งสองประเภทเป็นไปได้คือ ต้นทุนของความผิดพลาดทั้งสองประเภทนั้นมักไม่เท่ากัน ตัวอย่างเช่น ความผิดพลาดที่ไม่สามารถตรวจจับข้อบกพร่องบนชิ้นส่วนที่เกี่ยวข้องกับความปลอดภัยอาจส่งผลให้เกิดการเรียกคืนสินค้า ในขณะที่ความผิดพลาดจากการตรวจพบผิดพลาดมักมีต้นทุนเพียงไม่กี่นาทีสำหรับการตรวจสอบซ้ำ หากต้นทุนทั้งสองประเภทต่างกันหลายระดับ ค่าการตั้งค่าที่เหมาะสมจะชัดเจน และข้อกำหนดควรระบุไว้เช่นนั้น แทนที่จะเรียกร้องให้ทั้งสองค่าต่ำพร้อมกัน

บทความนี้อธิบายว่าอัตราทั้งสองชนิดมีปฏิสัมพันธ์กันอย่างไร แต่ละอัตรามีต้นทุนจริงเท่าใด และวิธีเขียนข้อกำหนดให้ชัดเจนว่าสายการผลิตสามารถยอมรับข้อผิดพลาดประเภทใดได้ บริษัท บิ๊ก เบิร์ด อินดัสเทรียล (เดิมชื่อ ชิมาดะ บิ๊ก เบิร์ด อินดัสเทรียล) ดำเนินการผลิตระบบทำความสะอาดและขจัดเศษโลหะจากชิ้นส่วนระบบขับเคลื่อนยานยนต์มาตั้งแต่ปี ค.ศ. 2001 โดยตัวเลขการตรวจจับที่ใช้ในที่นี้มาจากสถานีผลิตจริง

1. ข้อผิดพลาดทั้งสองประเภท

ควรปรับปรุงคำศัพท์ให้ชัดเจน เพราะบุคคลต่างๆ มักใช้คำเดียวกันเพื่ออธิบายข้อผิดพลาดทั้งสองประเภทนี้

การไม่ตรวจพบ

ข้อบกพร่องที่มีอยู่บนชิ้นงานไม่ถูกตรวจจับ และชิ้นงานนั้นยังคงผ่านไปยังขั้นตอนถัดไป อัตราการไม่ตรวจพบ คือ สัดส่วนของชิ้นงานที่มีข้อบกพร่องซึ่งผ่านการตรวจสอบไปได้ โดยสถานีผลิตทั่วไปมักกำหนดค่าไว้ที่ประมาณหนึ่งชิ้นต่อหนึ่งพันชิ้น และในแอปพลิเคชันที่เข้มงวดที่สุดอาจต่ำลงถึงหนึ่งชิ้นต่อสิบพันชิ้น

การแจ้งเตือนผิด

ชิ้นส่วนที่สอดคล้องตามมาตรฐานจะถูกทำเครื่องหมายไว้ และจะถูกนำออกจากสายการผลิตเพื่อตรวจสอบ ปรับปรุงใหม่ หรือทิ้งไป ขณะที่อัตราการแจ้งเตือนผิดพลาด (false-call rates) บนพื้นผิวจริงอยู่ระหว่างร้อยละหนึ่งถึงเจ็ด ขึ้นอยู่กับประเภทของข้อบกพร่องและลักษณะพื้นผิว โดยสถานีตรวจวัดที่รายงานค่าศูนย์มักกำลังวัดสิ่งที่ง่ายกว่าข้อกำหนดที่ตั้งไว้

เหตุใดจึงเคลื่อนที่ไปด้วยกัน

ตัวตรวจจับตัดสินใจโดยเปรียบเทียบสัญญาณกับเกณฑ์ที่กำหนด ถ้าลดเกณฑ์ลง จะสามารถตรวจจับข้อบกพร่องได้มากขึ้น แต่ก็จะทำให้ชิ้นส่วนที่ดีถูกทำเครื่องหมายผิดพลาดมากขึ้นด้วย เนื่องจากกลุ่มข้อมูลของชิ้นส่วนที่ดีทับซ้อนกับกลุ่มข้อมูลของข้อบกพร่องในลักษณะเฉพาะที่ตัวตรวจจับวัด

การทับซ้อนนี้มีพื้นฐานทางกายภาพ

การทับซ้อนนี้ไม่ใช่จุดอ่อนของการสร้างแบบจำลองที่สามารถแก้ไขได้ด้วยอัลกอริธึมที่ดีขึ้น รอยขีดข่วนตื้นและรอยเครื่องมือให้ความแตกต่างของสีที่คล้ายกัน รูพรุนเล็กๆ กับฝุ่นละอองก็ให้ความมืดที่คล้ายกันเช่นกัน ที่ซึ่งสองกลุ่มข้อมูลทับซ้อนกันจริงๆ ไม่มีเกณฑ์ใดแยกแยะได้อย่างสมบูรณ์แบบ และวิธีเดียวที่จะปรับปรุงประสิทธิภาพทั้งสองด้านพร้อมกันได้คือการเปลี่ยนสิ่งที่วัด แทนที่จะเปลี่ยนตำแหน่งของเกณฑ์

การเปลี่ยนสิ่งที่วัด

การเพิ่มแหล่งแสงที่สอง มุมมองที่สอง หรือกระแสลมที่สอง สามารถแยกกลุ่มตัวอย่างที่การวัดเพียงครั้งเดียวไม่สามารถทำได้ นี่คือวิธีที่ถูกต้องตามหลักการในการยกระดับอัตราทั้งสองอย่างพร้อมกัน และเป็นการเปลี่ยนแปลงฮาร์ดแวร์ ไม่ใช่การปรับแต่งพารามิเตอร์

3. ต้นทุนของแต่ละข้อผิดพลาด

ต้นทุนเหล่านี้ไม่สมมาตรกัน และการระบุค่าต้นทุนให้ชัดเจนคือสิ่งที่เปลี่ยนการแลกเปลี่ยนนี้ให้กลายเป็นการตัดสินใจ

ต้นทุนของการไม่ตรวจพบข้อบกพร่อง

ข้อบกพร่องที่ไม่ถูกตรวจพบจะเคลื่อนย้ายไปยังขั้นตอนถัดไป สำหรับชิ้นส่วนที่ผ่านการกลึง อาจถูกค้นพบในขั้นตอนการประกอบ ซึ่งต้นทุนคือการหยุดสายการผลิต สำหรับชิ้นส่วนที่เกี่ยวข้องกับความปลอดภัย อาจรอดไปถึงตลาด ซึ่งต้นทุนคือการเรียกคืนสินค้า ยิ่งข้อบกพร่องเคลื่อนย้ายไกลเท่าไร ต้นทุนก็ยิ่งสูงขึ้นเท่านั้น จึงเป็นเหตุผลที่อัตราการไม่ตรวจพบข้อบกพร่องถูกกำหนดไว้ที่ขั้นตอนที่สามารถตรวจจับข้อบกพร่องได้ด้วยต้นทุนต่ำที่สุด

ต้นทุนของการแจ้งเตือนผิด

การเรียกใช้งานผิดพลาดจะทำให้สูญเสียการตรวจสอบหนึ่งครั้ง การตรวจสอบซ้ำ หรือการปรับปรุงใหม่ นอกจากนี้ยังทำให้ความไว้วางใจลดลงด้วย: ผู้ปฏิบัติงานที่เห็นชิ้นส่วนที่ดีถูกปฏิเสธซ้ำ ๆ จะเรียนรู้ที่จะข้ามสถานีนั้นไป และสถานีที่ถูกข้ามไปจะไม่สามารถให้การป้องกันใด ๆ เลย ต้นทุนประการที่สองนี้คือสิ่งที่ไม่เคยถูกคำนวณไว้แต่เกิดขึ้นจริงเสมอ

4. จุดสมดุลที่ควรตั้งไว้

จุดสมดุลที่ถูกต้องเกิดจากอัตราส่วนของต้นทุนทั้งสองประเภท ซึ่งโดยทั่วไปมีค่าสูงมาก

เมื่อการไม่ตรวจพบข้อบกพร่องส่งผลร้ายแรง

ในการตรวจสอบลำดับ เช่น พื้นผิวความปลอดภัย หรือทางผ่านไฮดรอลิก การไม่ตรวจพบข้อบกพร่องอาจนำไปสู่ความล้มเหลวในสนามและจำเป็นต้องเรียกคืนสินค้า ดังนั้นสถานีตรวจสอบควรให้น้ำหนักอย่างมากต่อการปฏิเสธ โดยยอมรับอัตราการแจ้งเตือนเท็จที่สูงขึ้นเป็นค่าใช้จ่ายที่ต้องจ่าย ตัวอย่างเช่น สถานีตรวจสอบฝาครอบแบริ่งที่มีอัตราการไม่ตรวจพบข้อบกพร่องหนึ่งครั้งต่อสิบพันชิ้น และอัตราการแจ้งเตือนเท็จหนึ่งครั้งต่อร้อยชิ้น ถือว่ามีแนวโน้มการตัดสินที่เหมาะสมแล้ว

เมื่อค่าใช้จ่ายจากการแจ้งเตือนเท็จสูงกว่า

ในการตรวจสอบพื้นผิวด้านรูปลักษณ์ที่ดำเนินการในปริมาณสูง การแจ้งเตือนเท็จจะส่งชิ้นส่วนไปยังขั้นตอนการขัดเงาทุกกะ และต้นทุนสะสมอาจสูงกว่ามูลค่าของข้อบกพร่องที่ตรวจพบได้ ดังนั้นสถานีตรวจสอบเหล่านี้จึงปรับแต่งให้ใกล้เคียงกับจุดสมดุลมากขึ้น จึงเป็นเหตุผลว่าทำไมสถานีตรวจสอบสีจึงมีอัตราการไม่ตรวจพบข้อบกพร่องต่ำกว่า และมีอัตราการแจ้งเตือนเท็จสูงกว่าสถานีตรวจสอบความปลอดภัย

5. การวัดทั้งสองด้าน

สถานีหนึ่งจะถูกกำหนดลักษณะด้วยตัวเลขสองค่า และผู้จัดจำหน่ายที่เสนอเพียงค่าเดียว แสดงว่ากำลังอธิบายเพียงครึ่งเดียวของสถานีนั้น

ชุดข้อมูลสำหรับการตรวจสอบความถูกต้องต้องประกอบด้วยทั้งสองด้าน

ชุดข้อมูลทดสอบที่มีชิ้นส่วนบกพร่องจะวัดอัตราการไม่ตรวจพบ (miss rate) ส่วนชุดข้อมูลทดสอบที่มีชิ้นส่วนที่เป็นไปตามมาตรฐานจะวัดอัตราการแจ้งเตือนผิด (false-call rate) หากไม่มีชุดหลัง สถานีที่ปฏิเสธชิ้นส่วนทั้งหมดจะได้คะแนนสมบูรณ์แบบในชุดแรก จึงเป็นเหตุผลที่การทดสอบการยอมรับจำเป็นต้องรวมชิ้นส่วนจากการผลิตจริงด้วย

การวัดระหว่างดำเนินการ แทนที่จะวัดเฉพาะตอนส่งมอบ

อัตราทั้งสองด้านจะเปลี่ยนแปลงหลังจากเริ่มใช้งานจริง เนื่องจากหลอดไฟเสื่อมสภาพและประชากรของชิ้นส่วนเปลี่ยนแปลงไป การติดตามจำนวนธงแจ้งเตือนต่อชิ้นส่วนร้อยชิ้น และจำนวนข้อบกพร่องที่ยืนยันแล้วต่อชิ้นส่วนพันชิ้น จะช่วยให้สังเกตแนวโน้มการเปลี่ยนแปลงก่อนที่สถานีจะถูกเลี่ยงการใช้งาน

6. ด้านองค์กร

ปัญหาเชิงเทคนิคเป็นเพียงครึ่งหนึ่งของปัญหาทั้งหมด อีกครึ่งหนึ่งคือสิ่งที่องค์กรทำต่อธงแจ้งเตือนเหล่านั้น

สถานีที่มีธงถูกตรวจสอบโดยผู้มีอำนาจในการปล่อยชิ้นส่วนจะได้รับความไว้วางใจ สถานีที่มีธงเข้าสู่คิวที่ไม่มีใครจัดการจะถูกข้ามไป และเมื่อถูกข้ามแล้ว อัตราการแจ้งเตือนผิดพลาดจะไม่ยังคงเป็นต้นทุนอีกต่อไป แต่จะกลายเป็นนิสัยแทน ดังนั้น ตำแหน่งของการตรวจสอบจึงเป็นส่วนหนึ่งของงบประมาณความผิดพลาด ไม่ใช่เพียงรายละเอียดด้านการบริหาร

7. การเขียนลงในข้อกำหนด

ข้อกำหนดที่ระบุทั้งสองอัตรา ระบุอย่างชัดเจนว่าอัตราใดสามารถเปลี่ยนแปลงได้ และกำหนดชุดการทดสอบที่ใช้วัดอัตราทั้งสองนี้ คือข้อกำหนดที่ผู้จัดจำหน่ายสามารถออกแบบผลิตภัณฑ์ให้สอดคล้องได้

ข้อกำหนดที่เรียกร้องให้ทั้งสองอัตรานั้นมีค่าต่ำที่สุดเท่าที่จะเป็นไปได้ จะได้รับคำตอบเป็นตัวเลขที่อธิบายสภาพแวดล้อมห้องปฏิบัติการ มากกว่าสายการผลิตจริง คำถามที่ควรถามจึงไม่ใช่ว่าอัตราการไม่ตรวจพบต่ำสุดที่ทำได้คือเท่าใด แต่คืออัตราการไม่ตรวจพบที่แอปพลิเคชันต้องการคือเท่าใด และอัตราการแจ้งเตือนผิดพลาดที่สายการผลิตสามารถรองรับได้โดยยังคงรักษาอัตรานั้นไว้ได้คือเท่าใด

8. ต้นทุนของสถานีที่ไม่มีใครใช้

ต้นทุนที่ใหญ่ที่สุดในงบประมาณความผิดพลาดไม่ใช่การพลาดตรวจ (miss) หรือการแจ้งเตือนผิด (false call) แต่คือสถานีตรวจสอบที่หยุดถูกใช้งาน เพราะเมื่อถึงจุดนั้น อัตราการพลาดตรวจจะกลายเป็นเท่ากับสิ่งที่กระบวนการผลิตสร้างขึ้นโดยไม่มีการตรวจสอบเลย

สถานีตรวจสอบหยุดถูกใช้งานได้อย่างไร

เกิดขึ้นเป็นสามขั้นตอน คือ อัตราการแจ้งเตือนผิดเพิ่มสูงกว่าที่สายการผลิตจะรับได้ ทำให้พนักงานเริ่มคาดว่าชิ้นส่วนที่ดีจะถูกปฏิเสธโดยไม่จำเป็น คิวรีวิวยาวขึ้นเพราะไม่มีใครมีอำนาจปล่อยชิ้นส่วนที่ถูกทำเครื่องหมายออกอย่างรวดเร็ว แล้วมีคนพบวิธีข้ามระบบ (override) หลังจากนั้น ชิ้นส่วนที่คลุมเครือทุกชิ้นจึงถูกผ่านไปด้วยมือ ทั้งสามขั้นตอนนี้ไม่ใช่การตัดสินใจ แต่แต่ละขั้นตอนคือการตอบสนองต่อแรงกดดัน

มาตรการแก้ไขคือเชิงองค์กร มากกว่าเชิงเทคนิค ได้แก่ การแต่งตั้งผู้รีวิวที่ระบุชื่อไว้ชัดเจนพร้อมอำนาจในการตัดสินใจ เป้าหมายระยะเวลาในการรีวิว และตัวเลขรายเดือนที่แสดงความถี่ที่สถานีตรวจสอบถูกข้ามไป สถานีที่ผ่านการรีวิวและได้รับความไว้วางใจสามารถดำเนินงานได้ที่อัตราการแจ้งเตือนผิดซึ่งสายการผลิตยอมรับได้ แต่สถานีที่ถูกข้ามไปนั้นไม่มีอัตราความผิดพลาดใดๆ ที่คุ้มค่าจะวัด

คำถามที่พบบ่อย

สถานีตรวจสอบหนึ่งแห่งสามารถมีทั้งสองอัตรานี้ต่ำพร้อมกันได้หรือไม่

เฉพาะในกรณีที่ข้อบกพร่องกับพื้นหลังไม่ทับซ้อนกันทางแสงเท่านั้น ถ้าทับซ้อนกัน การปรับปรุงทั้งสองส่วนจำเป็นต้องเพิ่มข้อมูล เช่น แหล่งกำเนิดแสงอื่นหรือมุมมองอื่น แทนที่จะปรับค่าเกณฑ์

ควรระบุอัตราใดก่อน

อัตราการไม่ตรวจพบ เนื่องจากกำหนดโดยผลกระทบที่ข้อบกพร่องอาจก่อให้เกิดต่อกระบวนการขั้นตอนถัดไป ส่วนอัตราการแจ้งเตือนผิดจะตามมาจากการที่สายการผลิตสามารถรองรับได้ขณะบรรลุเป้าหมายนั้น

เหตุใดอัตราการแจ้งเตือนผิดจึงดูสูง

เพราะวัดจากพื้นผิวจริงในการผลิตจริงที่มีความแปรปรวนจริง อัตราที่อยู่ในหลักหน่วยต้นๆ บนชิ้นงานหล่อหรือแผ่นสีเป็นเรื่องปกติ และหากรายงานอัตราเป็นศูนย์ มักหมายความว่าชุดข้อมูลทดสอบนั้นง่ายเกินไป

หากพนักงานปฏิบัติการละเลยสถานีนี้จะเกิดอะไรขึ้น

นั่นคือภาวะล้มเหลวที่แท้จริง เกิดจากคิวการแจ้งเตือนที่ไม่มีผู้ตรวจสอบ หรืออัตราการแจ้งเตือนผิดที่สายการผลิตไม่สามารถรองรับได้ ซึ่งทำให้สถานีที่ทำงานได้ดีกลายเป็นเพียงกิจกรรมบันทึกข้อมูล

สรุป

การพลาดและการแจ้งเตือนผิดเกิดจากเกณฑ์เดียวกัน แต่มีต้นทุนที่แตกต่างกันมาก ข้อกำหนดที่มีประโยชน์จะระบุว่าระบบสามารถยอมรับได้เฉพาะแบบใดแบบหนึ่ง แทนที่จะเรียกร้องให้ทั้งสองแบบมีค่าต่ำพร้อมกัน

การปรับปรุงทั้งสองอย่างพร้อมกันเป็นปัญหาด้านฮาร์ดแวร์ ไม่ใช่ปัญหาด้านการปรับแต่ง และอัตราที่สำคัญที่สุดคืออัตราที่วัดได้จริงระหว่างการใช้งาน เพราะสถานีที่ไม่มีใครไว้วางใจจะมีอัตราการพลาดเท่ากับร้อยเปอร์เซ็นต์