Güncelleme: Temmuz 2026 · 7 dk okuma · Mert Aytunur · Mechanical Engineer, University of Illinois Chicago
%99 doğruluk neden kötü bir muayeneciyi gizler?
Doğruluk, bir muayenecinin doğru sınıflandırdığı parçaların (hatasız ya da hatalı) oranıdır. Kusurların nadir olduğu bir hatta bu tek sayı neredeyse her muayeneciyi olduğundan iyi gösterir; çünkü parçaların çoğu zaten hatasızdır ve hatasız bir parçaya hatasız demek kolaydır. 100 gerçek kusur içeren 10.000 parça çalışan bir hattı, yani %1 kusur oranını ele alın. Her parçayı bakmadan geçiren bir muayeneci yaklaşık 9.900 kez haklıdır ve %99 doğruluk alır, ancak sıfır kusur yakalar ve 100’ün hepsinin kaçmasına izin verir.
Başlık sayısı mükemmel görünür ve muayeneci işe yaramazdır. Nadir kusurlar doğruluğu bozar çünkü metriğe, hattın sevkiyata güvenli olup olmadığına karar veren birkaç hatalı parça değil, çok sayıdaki iyi parça hâkimdir. Kusur ne kadar nadirse, doğruluk muayeneciyi o kadar abartır ki bu, çoğu kalite hattının çalıştığı rejimdir tam olarak.
Kesinlik, duyarlılık ve F1 bir hatta aslında neyi ölçer?
Dört sayım herhangi bir muayeneciyi betimler: gerçek pozitifler (yakalanan kusurlar), yanlış negatifler (kaçırılan kusurlar, yani kaçışlar), yanlış pozitifler (yanlışlıkla reddedilen hatasız parçalar) ve gerçek negatifler (doğru geçirilen hatasız parçalar). Kesinlik ve duyarlılık bu sayımlardan farklı birer çifti okur ve her biri bir kalite yöneticisinin önemsediği bir soruyu yanıtlar.
Yakalama oranı veya hassaslık (sensitivity) olarak da adlandırılan duyarlılık (recall), muayenecinin yakaladığı gerçek kusurların oranıdır: yakalanan kusurlar bölü tüm gerçek kusurlar. Düşük duyarlılık, müşteriye ulaşan kaçışlar demektir. Kesinlik (precision), reddedilen parçaların gerçekten kusurlu olanların oranıdır: yakalanan kusurlar bölü muayenecinin reddettiği her şey. Düşük kesinlik, yanlış redler, yani atılan hatasız parçalar demektir.
F1 skoru, kesinlik ve duyarlılığın harmonik ortalamasıdır; 0’dan %100’e kadar tek bir sayıdır ve yalnızca ikisi de yüksek olduğunda yüksektir. Harmonik ortalama olduğu için, tek bir zayıf taraf onu sertçe aşağı çeker; böylece zayıf bir duyarlılığı iyi bir kesinliğin veya tersinin arkasına gizleyemezsiniz. İşte bu özellik, doğruluk olmadığında F1’i dürüst tek sayı yapan şeydir.
F1’i kaçışların ve yanlış redlerin dengesi olarak nasıl okursunuz?
F1, yalnızca hem kaçışlar hem de yanlış redler kontrol altında olduğunda hareket eder; işte bu yüzden doğruluğun pohpohladığı bir muayeneciyi açığa çıkarır. 100 kusurlu 10.000 parçalık hatta dönün ve aynı çalışmada iki muayeneciyi karşılaştırın.
| Metrik | Her şeyi geçiren muayeneci | Dengeli AI muayeneci | Neyi açığa çıkarır |
|---|---|---|---|
| Doğruluk | %99,0 | %99,7 | Neredeyse aynı, yani doğruluk farkı gizler |
| Duyarlılık (yakalama oranı) | %0 | %98 | Kaçışlar: müşteriye ulaşan kusurlar |
| Kesinlik | yok, hiçbir şeyi reddetmez | %77 | Yanlış redler: hurdaya çıkan hatasız parçalar |
| F1 skoru | 0 | %86 | Dürüst tek sayı |
Her şeyi geçiren muayeneci %99 doğruluk ve sıfır F1 alır: asla reddetmez, dolayısıyla asla bir şey yakalamaz. 100 kusurun 98’ini yakalayan ve 30 hatasız parçayı yanlışlıkla reddeden dengeli bir muayeneci %99,7 doğruluk, yani ancak biraz daha yüksek alır, ama F1’i yaklaşık %86’dır. İşe yaramaz bir muayeneciyi çalışan birinden bir doğruluk puanından az ayırır; F1 onları 86 puanla ayırır. İşte doğruluğun gizlediği ve F1’in gösterdiği fark budur.
%99,65 F1, %0,69 yanlış-negatif oranının yanında ne anlama gelir?
Yüksek bir F1 ve düşük bir yanlış-negatif oranı birlikte, istenmeye değer çifttir; çünkü biri genel dengeyi kanıtlar, diğeri müşterinize ulaşan hatayı sabitler. Canlı bir kapak muayene hattında Adente Vision, %0,69 yanlış-negatif oranıyla %99,65 F1’de çalışır ve kırık, kapanmamış ve menteşesi hasarlı kapakları parça başına yaklaşık 30 ms’de yakalar. F1, kesinlik ve duyarlılığın ikisinin de yüksek olduğunu söyler; dolayısıyla hat ne kusur sızdırıyor ne de hatasız kapakları hacimce hurdaya çıkarıyor.
%0,69 yanlış-negatif oranı, en çok önemli olan belirli hatanın, yani bir müşteriye ulaşan kötü bir kapağın, bin kusur başına kabaca yedi kaçışa indiğini söyler. Birlikte okunduğunda, iki sayı, doğruluğun arkasına saklanan değil, kontrol edebileceğiniz bir muayeneciyi betimler. Adente Vision, Aden Group bünyesindeki ADENTE Advanced Engineering Technologies tarafından geliştirilen ve otomasyon sistem entegratörleri üzerinden satılan bir edge-AI görsel muayene ünitesidir.
Bir görüntü işleme satıcısından hangi metriği talep etmelisiniz?
F1’i, kesinliği, duyarlılığı ve yanlış-negatif oranını, her biri sizinkine benzer parçalarda ölçülmüş olarak isteyin ve çıplak bir "%99 doğru"yu bir yanıt-değil olarak ele alın. Yalnızca doğruluk alıntılayan bir satıcı, ya size paraya mal olan hataları ölçmüyordur ya da nadir kusurlu bir hattın kolay matematiğine dayanıyordur. Dürüst küme küçüktür: dengeli tek sayı olarak F1, kaçışlar için duyarlılık ve yanlış-negatif oranı, yanlış redler için kesinlik; her biri kendi hatasız ve kusurlu parçalarınızın temsili bir çalışmasında ölçülmüş.
Aynı metrikler, tek bir ünitenin çalıştırdığı her görevi betimler, yüzey-kusuru anomali tespitinden sayıma ve boyutsal ölçüme kadar; böylece kapsadığı muayene uygulamaları genelinde görevleri aynı terimlerle karşılaştırabilirsiniz. Bir satıcının adlandırılmış bir vakanın yanına koyabileceği bir sayı, tıpkı bir %99,65 F1’in gerçek bir kapak hattının yanında oturması gibi, bir veri sayfasındaki kaynaksız bir yüzdeden çok daha değerlidir. Kaçışları en doğrudan izleyen metrik için yanlış-negatif oranı muayene metriği yazısına bakın; few-shot ve anomali tespitinin arkasındaki daha geniş yöntem için AI görsel muayene kılavuzuna bakın.