NVIDIA hat mit der Veröffentlichung von DeepStream 9.1 ein bedeutendes Update für die Entwicklung von Vision-AI-Pipelines vorgestellt. Der Fokus liegt auf der Vereinfachung komplexer Mehrkameravideanalytik durch die Einführung modularer agentic Skills, darunter die neuen Lösungen AutoMagicCalib (AMC) und Multi-View 3D Tracking (MV3DT). Diese Technologien adressieren zentrale Herausforderungen bei der Objektverfolgung in großen Räumlichkeiten wie Lagerhäusern, Einzelhandelsumgebungen oder intelligenten Gebäuden. Bisherige Ansätze zur 3D-Verfolgung über mehrere Kameras hinweg waren oft aufwändig und fehleranfällig. Einzelne 2D-Kameras verlieren das Sichtfeld bei Bewegungen und liefern keine zuverlässigen Tiefeninformationen. Zudem erforderten herkömmliche Kalibrierungsverfahren manuellen Aufwand und störten oft den laufenden Betrieb. MV3DT löst dieses Problem, indem es Detektionen aus mehreren Kameras in ein gemeinsames 3D-Koordinatensystem projiziert. Die Software verknüpft Beobachtungen derselben Objekte über Kamerablickwinkel hinweg und weist jedem Objekt eine weltweit eindeutige, konsistente ID zu. Dadurch bleibt die Nachverfolgung stabil, unabhängig davon, welche Kamera das Objekt gerade erfasst. Die automatische Kalibrierung übernimmt AMC. Anstelle manueller Platzierung von Kalibrierungsmustern analysiert die Komponente vorhandene Videostreams und extrahiert automatisch Objekttrajektorien. Daraus leitet AMC die intrinsischen Parameter wie Brennweite und Linsendistortion sowie die extrinsischen Werte wie Rotation und Position ab. Für Szenarien mit eingeschränkter Objektbewegung kann optional das VGGT-Modell für höhere Robustheit aktiviert werden. Der Prozess umfasst Trajektorienextraktion, Einzelkamerarektifizierung, Multi-View-Tracklet-Matching und eine globale Bundle-Adjustment-Optimierung. Die Kalibrierungsdateien werden nahtlos für MV3DT aufbereitet. Ein Kernmerkmal von DeepStream 9.1 ist die Integration von agentic Skills. Entwickler können die Pipeline nicht mehr nur manuell konfigurieren, sondern nutzen KI-Coding-Agents wie Claude Code oder Codex, um Anfragen in natürlicher Sprache zu formulieren. Der Agent übernimmt daraufhin die Repository-Einrichtung, Konfiguration und Ausführung. Dies reduziert die Entwicklungsdauer erheblich und minimiert manuelle Konfigurationsfehler. Für Standardtests stehen vorkalibrierte Mehrkameranetzwerke bereit. Bei individuellen Installationen erkennt der Agent automatisch das Fehlen von Kalibrierungsdaten, ruft AMC auf und leitet den Prozess ein, sobald der Nutzer über die Weboberfläche wenige Referenzpunkte zwischen Kamerabildern und einem Grundriss zuweist. Die Kombination aus automatischer Kalibrierung, verteilter 3D-Verfolgung und agentengestützter Deployment-Orchestrierung markiert einen Schritt hin zu industrietauglichen, skalierten Videoanalytiksystemen. Quelle und Referenzanwendungen sowie die vollständige Dokumentation zu den neuen Features stehen ab sofort auf dem NVIDIA DeepStream GitHub Repository bereit. Entwickler können dort auch Vorschauvideos und Beispieldatensätze herunterladen, um die Deployment-Pfade unter realen Bedingungen zu validieren.