IDS NXT malibu macht Consumer-Technologie, wie sie von Action-Kameras bekannt ist, für Anwender in einer KI-fähigen Industriekamera verfügbar. Aus der kombinierten Expertise von IDS und Ambarella ist so eine neue Klasse intelligenter Industriekameras entstanden. Gleichzeitig fügen sie sich nahtlos in das AI-Vision-Komplettsystem IDS NXT ein. Dies beinhaltet die Möglichkeit, individuelle neuronale Netze zu trainieren und und diese in selbst erstellten oder mitgelieferten Vision Apps direkt auf der Kamera auszuführen.
Die Modelle sind als Edge Devices konzipiert, die KI-basierte Bildauswertungen selbst vornehmen und die Ergebnisse z. B. als Overlays im Video-Livestream ausgeben können.
Die Bildausgabe erfolgt dabei über komprimierte Videostreams (H264 oder MJPEG) per RTSP oder HTTP, wobei die Bildqualität durch den integrierten ISP optimiert wird. Davon profitieren bspw. Anwendungen, bei denen Menschen durch visuelle Auswertungen ihrer Umgebung unmittelbar durch KI-basierte Bildverarbeitung unterstützt werden sollen.
Dank eines speziellen Chips werden Bildanalysen in hoher Geschwindigkeit (>25fps) durchgeführt und die Ergebnisse als Live-Overlays in komprimierten Videostreams per RTSP für Endgeräte ausgegeben. Ein MJPEG-komprimierter HTTP-Stream unterstützt bei Visualisierungsaufgaben.
IDS NXT malibu führt neuronale Netze selbständig aus und verbessert die Bildqualität dank des integrierten ISP. Durch die Embedded-Lösung kann auf einen PC verzichtet werden, wodurch sich der Energieverbrauch senken und Systemkosten reduzieren lassen.
Mit künstlicher Intelligenz lassen sich Aufgaben lösen, die mit klassischer Bildverarbeitung nur schwer oder gar nicht realisierbar sind.