Räumliches Verständnis für KI-Avatare in virtuellen Welten

Wie das Engineering der Zukunft aussieht, erforschen wir am Fraunhofer IEM in Paderborn – gemeinsam mit starken Partnern und viel Leidenschaft für Technik. Unsere Teams entwickeln Lösungen, die wirklich in die Anwendung kommen: von smarten Produkten über vernetzte Produktionssysteme bis hin zu digitalen Services und moderner Software. Dabei denken wir Innovation vom ersten Konzept bis zur Umsetzung. Und genau hier kommst Du ins Spiel.

 

Was Du bei uns tust

Intelligente virtuelle Agenten und KI-Avatare werden zunehmend in immersiven XR-Anwendungen eingesetzt – von interaktiven Museumsführern bis hin zu digitalen Assistenten und Trainern in industriellen Umgebungen. Doch um mit Menschen in 3D-Räumen glaubwürdig zu interagieren, benötigen diese Avatare mehr als nur Sprache: Sie müssen ihre Umgebung „verstehen“, sich räumlich orientieren und situativ passend kommunizieren können.

Im Rahmen dieser Arbeit soll untersucht werden, wie KI-basierten Avataren ein räumliches Verständnis ihrer (virtuellen) Umgebung ermöglicht werden kann. Dabei können moderne Ansätze aus der Forschung wie semantische 3D-Repräsentationen, Graph-Ansätze oder multimodale LLM-Schnittstellen analysiert und erprobt werden. Ziel ist es, ein konzeptionelles Framework sowie eine prototypische Lösung zu entwickeln, die zeigt, wie Spatial Awareness für digitale Avatare realisiert und zur Interaktion genutzt werden kann – z. B. für Navigation, Objektbezug oder räumliche Erklärungen. Zu den Aufgaben zählen:

• Recherche bzgl. Spatial Awareness, multimodalen LLMs etc.  
• Konzipierung einer Lösung für Spatial Awareness von Avataren
• Prototypische Implementierung des Konzepts
• Evaluierung anhand eines Anwendungsfalls

 

Was Du mitbringst

• Du studierst Informatik, Computer Engineering, Computervisualistik und Design oder einen vergleichbaren Studiengang
• Du bist interessiert an interaktiven 3D- und KI-Anwendungen und hast idealerweise Erfahrung mit Unity
• Du hast Programmiererfahrung (z.B. C#, Python)
• Du bist motiviert und arbeitest gerne eigenverantwortlich

 

Was Du erwarten kannst

• Eine Position, in der du die Innovationen von morgen vorantreiben kannst
• Eine professionelle Betreuung und fachliche Unterstützung bei der Erstellung der Projekt-/Abschlussarbeit
• Flexible Arbeitszeiten, die sich gut mit deinem Studium vereinbaren lassen
• Möglichkeit, eigene Ideen einzubringen und an der Schnittstelle zwischen Forschung und Industrie mitzuwirken
• Bei dieser Position handelt es sich um eine unbezahlte Tätigkeit

 

Wir wertschätzen und fördern die Vielfalt der Kompetenzen unserer Mitarbeitenden und begrüßen daher alle Bewerbungen – unabhängig von Alter, Geschlecht, Nationalität, ethnischer und sozialer Herkunft, Religion, Weltanschauung, Behinderung sowie sexueller Orientierung und Identität. Schwerbehinderte Menschen werden bei gleicher Eignung bevorzugt eingestellt.