Aktualisiert Juli 2026 · 7 Min. Lesezeit · Serkan İnkaya · Mechanical Engineer, ODTÜ
Warum an eigenen Teilen abnehmen, nicht an der Demo des Anbieters?
Eine Anbieterdemo beweist, dass das System an den Teilen des Anbieters unter dessen Beleuchtung funktioniert, und das ist nicht die Frage, die Sie beantwortet brauchen. Ihre Teile, Ihre Liniengeschwindigkeit, Ihre Beleuchtung und Ihr Fehlermix sind das, was der Prüfer in der Produktion überstehen muss, und der einzig belastbare Weg, das zu wissen, ist, es vor der Freigabe an genau diesen Teilen zu messen. Ein Abnahmetest verwandelt "sah in der Demo gut aus" in eine unterschriebene Zahl.
Die Struktur ist dieselbe wie bei jeder Messsystem-Abnahme: Definieren Sie vor dem Start, was Bestehen heißt, fahren Sie einen kontrollierten Teilesatz durch das System und prüfen Sie die Ergebnisse gegen die vereinbarten Kriterien. Behandeln Sie den Prüfer wie ein Messmittel, das Sie qualifizieren, nicht wie ein Gerät, das Sie ausprobieren. Adente Vision ist eine Edge-KI-Sichtprüfeinheit von ADENTE Advanced Engineering Technologies, Teil der Aden-Gruppe, vertrieben über Automatisierungs-Systemintegratoren, und die Abschnitte unten legen einen Abnahmetest aus, den Sie mit Ihrem Integrator an Ihrer eigenen Linie fahren können.
Wie stellen Sie den Pilot-Teilesatz zusammen?
Der Pilot-Teilesatz hat drei Gruppen, und Sie stellen alle drei vor dem Lauf zusammen, damit niemand das System nachträglich auf den Test einstellt. Jede Gruppe beantwortet eine andere Frage, und jede führt zu einer Metrik, die Sie protokollieren.
- Bekannte Gutteile: konforme Teile, die das System passieren lassen muss. Sie messen die Pseudoausschussrate, die fälschlich zurückgewiesenen Gutteile.
- Bekannte Schlechtteile: echte Fehlerteile aus Ihrer Ausschusshistorie. Sie messen die Falsch-Negativ-Rate, die durchrutschenden Fehler.
- Teile mit gesetzten Fehlern: Teile mit gezielt eingebrachten Fehlern jedes Typs, der Sie interessiert, an der Schwereschwelle, die gefangen werden muss. Sie messen die Erkennungsrate je Fehlerklasse und tasten die Grenze ab.
Dimensionieren Sie jede Gruppe so, dass die Zahlen etwas bedeuten. Eine Handvoll Teile kann keine Rate begründen; vereinbaren Sie die Stückzahlen mit Ihrem Qualitätsteam, damit hinter Schlupf- und Pseudoausschusszahlen genug Teile stehen, um glaubwürdig zu sein. Weil das Modell nur mit Gutteilen aus rund 20 guten Referenzbildern trainiert, halten Sie die Trainingsbilder von den Abnahmeteilen getrennt, damit Sie testen, worauf das Modell generalisiert, nicht, was es auswendig gelernt hat.
Welche Metriken entscheiden über Bestehen oder Durchfallen?
Zwei Zahlen entscheiden die Genauigkeitsfrage: die Falsch-Negativ-Rate, der Anteil echter Fehler, die durchgerutscht sind, und die Pseudoausschussrate, der Anteil fälschlich zurückgewiesener Gutteile. Der F1-Score vereint die zugrunde liegende Precision und den Recall in einer Zahl, aber im Abnahmetest wollen Sie die beiden Fehlerraten getrennt ausgewiesen, weil sie an Ihrer Linie unterschiedliche Kosten und unterschiedliche Verantwortliche haben.
Protokollieren Sie sie an Ihren Teilen, nicht an denen des Anbieters. Als Referenz, wie stark aussieht: Adente Vision erreichte 99,65 % F1 bei einer Falsch-Negativ-Rate von 0,69 % an einer laufenden Verschlussprüflinie, aber das ist der Kontext des Anbieters; Ihre Abnahmezahl ist das, was das System an Ihren gesetzten und bekannten Schlechtsätzen erreicht. Die Stufentabelle unten verknüpft jede Pilotgruppe mit ihrer Metrik und dem Kriterium, das sie erfüllen muss.
| Pilotstufe | Was Sie messen | Bestehenskriterium |
|---|---|---|
| Lauf mit bekannten Gutteilen | Pseudoausschussrate (Precision) | Auf oder unter Ihrer vereinbarten Pseudoausschuss-Obergrenze |
| Lauf mit bekannten Schlechtteilen | Falsch-Negativ-Rate (Recall) | Null Schlupf im kritischen Fehlersatz, nahe einer niedrigen FNR-Referenz |
| Lauf mit gesetzten Fehlern | Erkennungsrate je Fehlertyp | Jede gesetzte Klasse bei der festgelegten Konfidenz gefangen |
| Wiederholbarkeit (Gauge R&R) | Messstreuung, dieselben Teile wiederholt | Innerhalb der Abnahmerichtwerte der Standardmethode |
| Geschwindigkeit unter Takt | Prüfzeit pro Teil | Innerhalb Ihres Taktbudgets, gemessen an Ihrer Linie |
Wie gilt Gauge R&R für eine Bildverarbeitungsprüfung?
Gauge R&R (Wiederholbarkeit und Reproduzierbarkeit), eine Form der Messsystemanalyse, wie sie das NIST/SEMATECH e-Handbook im Kapitel Measurement Process Characterization darstellt, fragt, ob dasselbe Teil bei wiederholter Messung dasselbe Ergebnis liefert, und das gilt für einen Bildverarbeitungsprüfer genauso wie für einen Messschieber. Fahren Sie einen Teilesatz mehrfach durch das System, wo relevant über Schichten oder Bediener hinweg, und protokollieren Sie, wie stark Gut/Schlecht oder das gemessene Maß streut, obwohl sich am Teil nichts geändert hat. Streuung ohne reale Ursache ist Messrauschen, das Sie begrenzen müssen, bevor Sie dem Messmittel vertrauen.
Nutzen Sie die Standardmethode statt einer Ad-hoc-Prüfung. Die AIAG-Referenz zur Messsystemanalyse liefert das anerkannte Verfahren und die üblichen Abnahmebänder, bei denen ein Studienergebnis unter etwa 10 % im Allgemeinen akzeptabel und 10 % bis 30 % je nach Anwendung grenzwertig ist. Für Maßkontrollen gilt die verwandte Zehner-Regel, wonach das Messsystem etwa ein Zehntel der beurteilten Toleranz auflösen sollte; entscheiden Sie also vorab, dass die Auflösung Ihres Prüfers zur Zeichnungstoleranz passt. Das sind Standardwerte aus der Messtechnik-Literatur, keine Adente-Behauptungen, und sie geben Ihrem Abnahmetest eine externe Basis statt einer Hausmeinung.
Wie validieren Sie, was ein 20-Bilder-Modell wirklich gelernt hat?
Das Training mit rund 20 guten Bildern ist effizient, und es macht die Validierung wichtiger, nicht unwichtiger, denn Sie wollen bestätigen, dass das Modell die Fehlergrenze gelernt hat und nicht eine Eigenheit des Trainingssatzes. Der Lauf mit gesetzten Fehlern ist die Stelle, an der Sie das prüfen: Bringen Sie Fehler ein, die das Modell im Training nie gesehen hat, auf und knapp über der Schwere, die gefangen werden muss, und bestätigen Sie, dass es sie bei der vor dem Lauf gesetzten Konfidenzschwelle meldet.
Setzen Sie diese Konfidenzschwelle zuerst und fahren Sie dann, damit Sie nicht die Torpfosten verschieben, um das System bestehen zu lassen. Speisen Sie Grenzfälle oder verpasste Fälle aus dem gesetzten Lauf als neue Gut- oder Schlecht-Referenzen ein, trainieren Sie im Fenster von unter 48 Stunden nach und wiederholen Sie den Abnahmesatz, um zu bestätigen, dass die Korrektur hält, ohne die Gutteilrate zu brechen. Wenn jede Stufe der Tabelle ihr Kriterium an Ihren Teilen erfüllt, ist die Freigabe belastbar. Die Metriken hinter den Bestehenskriterien zeigt der Schwesterbeitrag zur Falsch-Negativ-Rate; wie Sie einen Anbieter diese Zahlen vorab nennen lassen, der Beitrag zu Benchmark-Fragen; und die Methode hinter Few-Shot- und Anomalieerkennung der Leitfaden.