Studien-/ Abschlussarbeit: Beschleunigung von KI-Videoauswertung mit spezialisierter Hardware

Die Fraunhofer-Gesellschaft (www.fraunhofer.de) betreibt in Deutschland derzeit 76 Institute und Forschungseinrichtungen und ist eine der führenden Organisationen für anwendungsorientierte Forschung. Rund 32 000 Mitarbeitende erarbeiten das jährliche Forschungsvolumen von 3,4 Milliarden Euro.

Ihre Aufgaben

• Recherche zum Stand der Technik im Bereich KI-Beschleunigung, Objektdetektion und/oder Aktivitätserkennung

• Implementierung und Optimierung der Videoverarbeitungs-Pipelines mehrerer KI-Modelle/Ansätze auf diverser KI-Hardware

• Evaluation und Vergleich der unterschiedlichen Ergebnisse inklusive detaillierter Laufzeit- und Genauigkeitsmessung

• Wissenschaftliche Ausarbeitung des Vorgehens und der Ergebnisse,

• Vorkenntnisse im Bereich Machine Learning

• Vorkenntnisse im Bereich Computer Vision

• Fortgeschrittene Programmierkenntnisse in Python

• Fortgeschrittene Programmierkenntnisse in C++ wünschenswert

• Interesse an wissenschaftlicher Arbeit

• Selbstständiges Arbeiten und Eigeninitiative,

• Angenehme Arbeitsatmosphäre gemeinsam mit anderen Studierenden und Mitarbeitern

• Umfangreiche und kompetente Betreuung mit hoher wissenschaftlicher Expertise

• Erstklassige Ausstattung für KI-Entwicklung und Forschungsinfrastruktur

Ihr Profil

Ausschreibung für die Fachrichtungen wie z. B.: Automatisierungstechnik, Elektrotechnik, Informatik, Mechatronik, Softwaredesign, Softwareengineering, technische Informatikoder vergleichbare.

Der Forschungsbereich für Künstliche Intelligenz und Maschinelles Sehen am Fraunhofer IPA beschäftigt sich mit KI-basierter Videoauswertung mittels Objektdetektion und Aktivitätserkennung. Diese Videoauswertung muss mit möglichst niedriger Latenz auf industriellen Systemen eingesetzt werden, wofür effiziente Beschleuniger-Hardware wie GPUs und NPUs notwendig sind.

Das Ziel dieser Abschlussarbeit ist die Untersuchung und Latenz-Optimierung von Videoauswertungs-Pipelines auf spezialisierten KI-Beschleunigern (bspw. NVIDIA Jetson Orin AGX, SiMa.ai MLSoC, Hailo-8) im Kontext von industrieller Objektdetektion und Aktivitätserkennung. Hierbei sind unterschiedliche Themenvariationen und Abgrenzungen vorstellbar, die wir beim ersten Gespräch näher erläutern.

Gerne können Sie das Themengebiet auf eigene Initiative erweitern und verfeinern. Interesse an einer Veröffentlichung ist erwünscht, aber nicht erforderlich.

Kontakt

Frau Lisa Bauer Recruiting

lisa.bauer@ipa.fraunhofer.de

Fraunhofer-Institut für Produktionstechnik und Automatisierung IPA

www.ipa.fraunhofer.de