Instanzsegmentierung auf Edge AI-Plattformen: Integration von Basler Hochgeschwindigkeitskameras und YOLO-Seg

In seiner Bachelorarbeit entwickelte Lasse Broer ein performantes KI-System zur Instanzsegmentierung auf einem Jetson AGX Orin, das Bilddaten einer Basler Hochgeschwindigkeitskamera in Echtzeit mit einem YOLO-Seg-Modell verarbeitet.

Im Mittelpunkt der Arbeit stand die vollständige Installation und Konfiguration aller Komponenten sowie die Evaluation der Bildverarbeitungspipeline hinsichtlich Genauigkeit, Geschwindigkeit und Latenz. Zur Veranschaulichung entstand ein Demonstrator auf Basis von NVIDIA DeepStream, der auf einer Rampe zwei Objekte bei bis zu 198 Hz analysiert.

Das entwickelte Testframework erlaubte die gezielte Variation zentraler Parameter (Präzision, Auflösung, Modellvariante, Farbformat) zur Bewertung ihrer Auswirkungen auf die Gesamtperformance. In 16 Experimenten wurden objektive Messwerte (z. B. Latenz) und subjektive Kriterien (Segmentierungsqualität) erfasst.

Die Ergebnisse zeigen, dass eine robuste Instanzsegmentierung auf Edge-Hardware mit sorgfältiger Abstimmung möglich ist – auch bei extremen Anforderungen an Echtzeitfähigkeit und Geschwindigkeit.

Kolloquium: 31.03.2025

Betreuer: Dipl.-Inform. Ingo Boersch, Prof. Dr. Emanuel Kitzelmann

Download: A1-Poster

Demonstration der Instanzsegmentierung im Live-Stream, 198Hz bei UXGA (1440 × 900)