NVIDIA DeepStream 9.1 automatisiert Multi-Kamera-Tracking

DeepStream 9.1 automatisiert Multi-Kamera-Tracking

Entwickler von Videoanalyselösungen in weitläufigen Umgebungen stehen vor der Herausforderung, dasselbe Objekt zuverlässig über mehrere Kameraperspektiven hinweg zu verfolgen. Typische Einsatzfelder sind die Lagersicherheit, die Analyse von Kundenströmen im Einzelhandel oder die Überwachung intelligenter Gebäude. Herkömmliches 2D-Tracking mit einer einzelnen Kamera liefert keine verlässlichen Tiefeninformationen und verliert das Objekt in der Regel, sobald es das Sichtfeld verlässt. Zwar existieren bereits 3D-Tracking-Methoden, doch diese setzen eine manuelle Kamerakalibrierung und komplizierte Berechnungen voraus. Die manuelle Kalibrierung erfordert das exakte Vermessen von Kamerapositionen, Blickwinkeln und Objektiveigenschaften – ein zeitaufwändiger, fehleranfälliger Prozess, der bei jeder Änderung der Kamerakonfiguration wiederholt werden muss. Bisherige 3D-Tracking-Ansätze erfordern oft eine aufwändige manuelle Kalibrierung jeder Kamera, was den Einsatz in dynamischen Umgebungen unpraktisch macht. In einem Lagerhaus etwa müssen Gabelstapler und Personal über mehrere Kamerabereiche hinweg lückenlos verfolgt werden, was mit 2D-Tracking nicht zuverlässig gelingt. Diese Hürden erschweren den skalierbaren Einsatz von Multi-Kamera-Systemen erheblich. [Herstellerangabe]

Mit der jetzt veröffentlichten Version 9.1 des Videoanalyse-SDKs DeepStream adressiert NVIDIA diese Herausforderungen durch zwei neue Funktionen: AutoMagicCalib (AMC) und Multi-View 3D Tracking (MV3DT). Sie ermöglichen eine robuste 3D-Objektverfolgung über mehrere Kameras hinweg, ohne dass Entwickler manuell kalibrieren müssen. DeepStream dient als Framework für KI-gestützte Videoanalyse-Pipelines und stellt bereits Bausteine wie Streaming-Eingabe, Inferenz, Tracking und Visualisierung bereit. Mit diesem Update kommen die Module AMC und MV3DT hinzu, die eine automatische Kalibrierung und Fusion von Kamerabildern ermöglichen. AutoMagicCalib eliminiert die manuelle Kalibrierung, indem es die relativen Kamerapositionen und -ausrichtungen automatisch aus den Videostreams schätzt. MV3DT fusioniert dann die 2D-Detektionen der einzelnen Kameras in Echtzeit zu einem konsistenten 3D-Tracking, sodass Objekte auch bei Kamerawechseln eindeutig identifiziert werden. Die neuen Funktionen zielen darauf ab, die Bereitstellung präziser und kontinuierlicher Objektverfolgung in großen Räumen deutlich zu vereinfachen. [Herstellerangabe]

AutoMagicCalib und MV3DT: Fusion von Kameraerkennungen

AMC und MV3DT fusionieren die Erkennungen aus mehreren Kameras, um eine konsistente 3D-Verfolgung zu erreichen. Anstatt auf eine manuelle Kalibrierung angewiesen zu sein, gleicht das System die 2D-Detektionen der einzelnen Kameras in Echtzeit ab und stellt automatisch die Korrespondenz zwischen den verschiedenen Ansichten her. Dadurch wird ein Objekt auch dann eindeutig identifiziert und weiterverfolgt, wenn es das Sichtfeld einer Kamera verlässt und in das einer anderen eintritt. Die Fusion der Erkennungen eliminiert die bisher notwendigen manuellen Schritte und die komplexen Berechnungen, die bei herkömmlichen 3D-Tracking-Ansätzen anfallen. Dabei schätzt AMC automatisch die extrinsischen Kameraparameter, während MV3DT die 2D-Detektionen in ein gemeinsames 3D-Koordinatensystem projiziert und fusioniert, sodass Objekte kameraübergreifend verfolgt werden können.

Anwendungen wie die Lagersicherheit, bei der die Bewegung von Gabelstaplern und Personal lückenlos nachvollzogen werden muss, oder die Einzelhandelsanalyse, die Kundenwege über verschiedene Abteilungen hinweg erfasst, profitieren unmittelbar von dieser Technologie. Auch in intelligenten Gebäuden kann so eine durchgängige Überwachung ohne tote Winkel realisiert werden. Die Kombination aus AMC und MV3DT liefert eine robuste 3D-Verfolgung, die ohne die bisherigen manuellen Eingriffe auskommt und Entwicklern den Aufbau skalierbarer Multi-Kamera-Analyselösungen erleichtert. [Herstellerangabe]