Bir görüntü işleme satıcısı nasıl kıyaslanır: 12 soru ve arkalarındaki sayılar.

Çoğu görü teklifi sıfatlarla yazılır: yüksek doğruluk, gerçek zamanlı, kolay devreye alma. Bunların hiçbiri doğrulanamaz; doğrulanabilecek ayrıntılar, yani yanlış-negatif oranı, parça başına süre, eğitim verisi ihtiyacı ve veri yolu, zayıf bir teklifin tam da dışarıda bıraktığı şeylerdir. Çözüm, her satıcıyı kendi kalitenizi yargılarken kullanacağınız birimlerle yanıtlamaya zorlamak ve bir teklifi sıfatlar üzerinden puanlamayı reddetmektir.

Aşağıdaki 12 soru üç gruba ayrılır: gerçek doğruluğu açığa çıkaran metrik soruları, gerçek iş yükünü açığa çıkaran pratik sorular ve verinizin nerede yaşayacağına karar veren mimari soruları. Adente Vision'ın verdiği yanıtlar, somut bir yanıtın neye benzediğine dair işlenmiş bir örnek olarak metin boyunca ilerler. Bunları tamamlayan görüntü işleme satıcısına sorulacak sorular listesi, bu on iki sorunun iki yanındaki alanı kapsar.

Bir görüntü işleme satıcısından gelen "%99 doğru" neden bir yanıt değildir?

Doğruluk her doğru kararı sayar ve 100 parçadan 1'inin kusurlu olduğu bir hatta, her parçayı geçiren bir sistem %99 doğrudur ve sıfır kusur yakalar. Bu tek rakam, gerçekten paraya mal olan iki hatayı gizler: müşterinize ulaşan kaçış ve yanlışlıkla reddedilen hatasız parça. Bunu açığa çıkaran sayı, geçen hatalı parçaların oranı olan yanlış-negatif oranıdır; F1, kesinlik ve duyarlılıkla birlikte okunur. Bunları isteyin, "%99 doğru" bir yanıt olmaktan çıkar. Yanlış-negatif oranının talep edilecek metrik olmasının nedeni için muayene metriği olarak yanlış-negatif oranına bakın.

Hangi metrik sorular gerçek doğruluğu açığa çıkarır?

1'den 4'e kadar olan sorular, belirsiz bir "yüksek doğruluk" iddiasını karşılaştırabileceğiniz bir şeye dönüştürür. Her birini sorun ve ölçümün hangi parçalarda yapıldığını da sorun.

• 1. Benimki gibi bir kusurda F1-skorunuz nedir ve kimin parçalarında ölçüldü? F1, kaçışları ve yanlış redleri tek dürüst sayıda toplar. Bir referans noktası olarak Adente Vision, canlı bir kapak muayene hattında %99,65 F1'e ulaştı ve bağlam, rakamın kendisi kadar önemlidir.
• 2. Yanlış-negatif oranınız, yani kaçış oranınız nedir? Bu, bir kalite yöneticisinin uykusunu kaçıran sayıdır. Aynı kapak hattı %0,69 yanlış-negatif oranıyla çalıştı. Bunu sizin kusur tipiniz için söyleyemeyen bir satıcı, onu ölçmemiş demektir.
• 3. Kesinlik ve duyarlılık ayrı ayrı nedir? F1 bir özettir; kesinlik (redlerin kaçı gerçekti) ve duyarlılık (kusurların kaçı yakalandı), sistemin hangi yöne doğru hata yaptığını söyler.
• 4. Parça başına muayene süresi nedir? Belirtilmiş bir sınıra göre ölçülmüş bir rakam isteyin. Adente Vision, parça başına 0,5 s ve dakikada 100+ parça şeklinde tutucu bir katalog sınırı taahhüt eder ve size taahhüt edilecek sayının kendi parçalarınızda uygulamaya özgü bir ölçüm gerektirdiğini belirtir.

Bir satıcı bu dört sorudan herhangi birini "çok doğru" veya "gerçek zamanlı" diye yanıtlıyorsa, bunu geçer not olarak değil eksik bir veri noktası olarak değerlendirin.

Hangi pratik sorular gerçek iş yükünü açığa çıkarır?

5'ten 8'e kadar olan sorular, bir devreye almanın zamanınıza ve paranıza gerçekte ne kadara mal olduğuna karar verir; sessiz sürprizlerin çoğu burada yaşar.

• 5. Başlamak için kaç referans görüntüsüne ihtiyacınız var? Modern bir anomali yaklaşımı yalnızca hatasız parçalarla eğitilir. Adente Vision yaklaşık 20 hatasız referans görüntüsüyle başlar; böylece devreye almadan önce aylarca kusur kataloğu toplamazsınız.
• 6. Model eğitimi ne kadar sürüyor ve kim yürütüyor? Kapak hattında eğitim 48 saatten kısa sürede tamamlandı. Veriyi bir satıcının veri bilimi ekibine göndermenizin mi gerektiğini, yoksa eğitimin sizin sahanızda mı gerçekleştiğini sorun.
• 7. Kurulum ne kadar sürüyor ve bir görüntü işleme mühendisi gerektiriyor mu? Adente Vision, ünite 9 kg'ın altında olduğu için tek kişi tarafından yaklaşık 30 dakikada monte edilir; dört adımlı Mount, Aim, Configure, Wire rutini ve cihaz üstü önizleme sayesinde hizalama için laptop gerekmez.
• 8. Devreye aldıktan sonra yeni bir varyantı veya yeni bir kusuru nasıl ele alıyorsunuz? Bunun bir eğitim işi mi yoksa yeniden mühendislik işi mi olduğunu sorun. Örneklerden öğrenmek, varyant eklemenin bir yeniden yazım değil, bir çek-ve-eğit işi olduğu anlamına gelir.

Hangi mimari sorular verinizin nerede yaşayacağına karar verir?

9'dan 12'ye kadar olan sorular, görüntülerinizin nereye gittiğine ve sistemin kontrol mimarinize nasıl oturduğuna karar verir. Hassas parça fikri mülkiyeti olan bir tesis için bunlar, metrik yanıtlarından daha ağır basabilir.

• 9. Çıkarım edge'de mi yoksa bulutta mı çalışıyor? Adente Vision, muhafazanın içindeki fansız, 8-16 GB Jetson sınıfı bir kartta çalışır; böylece karar, gidiş-dönüş olmadan hat üzerinde verilir.
• 10. Parça görüntülerim nereye gidiyor, hattan dışarı çıkıyor mu? Cihaz üstü çıkarım, ham görüntülerin tesis içinde kalması demektir. Herhangi bir bulut satıcısından, görüntülerinizin nerede tutulduğunu ve ne kadar saklandığını yazılı olarak beyan etmesini isteyin.
• 11. PLC'me veya robotuma hangi protokollerle konuşuyorsunuz? Adente Vision, geç/kal ve program seçimini PROFINET, EtherNet/IP, Modbus TCP, EtherCAT veya OPC UA üzerinden taşır; dijital sinyaller için 24V'ta 4 giriş ve 4 çıkış sunar.
• 12. Hava boşluklu (air-gapped) bir hatta modeller nasıl güncelleniyor? USB bellekle güncellemeler, ağı olmayan hatları destekler; böylece sertleştirilmiş bir hücre güncel kalmak için çevrimiçi olmaya zorlanmaz.

İyi bir yanıt ile uyarı işareti nasıl ayırt edilir?

Her yanıtı, doğrulanabilir bir rakam mı yoksa bir sıfat mı olduğuna göre puanlayın. Desen tutarlıdır: iyi bir yanıt bir sayıyı ve ölçüldüğü koşulları adlandırır; uyarı işareti ise bir gerçeğin yerine bir duygu koyar.

On iki sorunun tümünü kesen tek uyarı işareti, sayının ait olduğu yerde duran sıfattır. Arkasında rakam olmayan yüksek doğruluk, gerçek zamanlı, gelişmiş; bir iddianın hiç ölçülmediğinin işaretidir.

Yanıtları nasıl puanlamalısınız?

Sunuma göre değil kanıta göre puanlayın. Adlandırılmış koşullarla gelen her sayı yanıtına bir puan, bağlamsız bir sayıya yarım puan, bir sıfata sıfır verin. Yanlış-negatif oranı ve veri saklama yeri yanıtlarına en yüksek ağırlığı verin; çünkü bir kaçış müşterinize, bir veri sızıntısı hukuk ekibinize ulaşır ve ikisini de geri almak kolay değildir.

Aynı 12 soruyu her satıcıya ve bir otomasyon entegratörüne sorun; puanlar doğrudan karşılaştırılabilir hale gelir. En güçlü kanıta sahip satıcı, nadiren en çok sıfata sahip olandır ve sormanın amacı da budur. Adente Vision, Aden Group bünyesindeki ADENTE Advanced Engineering Technologies tarafından geliştirilen ve otomasyon sistem entegratörleri üzerinden satılan bir edge-AI görsel muayene ünitesidir; yukarıdaki somut yanıtlar, doğrulanabilir bir yanıtın neye benzediğini gösterir. Tam teknik özellikler için sistem sayfasına, few-shot ve anomali tespitinin arkasındaki yöntem için yapay zeka görsel muayene rehberine bakın.