Senior AI Engineer - Reinforcement Learning

Resaro entwickelt fortschrittliche KI-Testsoftware, um Organisationen dabei zu helfen, ihre kritischsten KI-Systeme - von Computer Vision über generative KI bis hin zu autonomen Systemen - zu überprüfen, zu validieren und zu vertrauen. Unsere Mission ist es, sicherzustellen, dass KI-Technologien, die in realen, risikobehafteten Umgebungen eingesetzt werden, robust, erklärbar und sicher sind. Wir arbeiten eng mit unseren Kunden durch eingebettete Lieferteams zusammen, die vor Ort oder in enger Zusammenarbeit tätig sind. Diese Teams passen Lösungen an spezifische Missionsbedürfnisse an und helfen Organisationen, insbesondere im Bereich der öffentlichen Sicherheit und nationalen Sicherheit, die Leistung ihrer KI-gestützten Systeme zu bewerten und zu verbessern.

Über die Rolle: Als Senior AI Engineer - Reinforcement Learning sind Sie der Hauptarchitekt unserer KI-Test-, Evaluierungs-, Verifizierungs- und Validierungs (TEVV)-Produktreihe für Reinforcement-Learning-Systeme. Sie leiten die Entwicklung von Next-Generation-KI-Test- und Sicherungsrahmen mit Anwendungen in autonomem Fahren und Robotik. Ihre Mission ist es, unsere Fähigkeiten im Bereich Reinforcement Learning zu skalieren, um sicherzustellen, dass autonome Agenten im Feld sicher, robust und erklärbar sind. Dies ist zunächst eine praktische Rolle als individueller Beitragender, mit der Möglichkeit, ein Team aufzubauen und zu leiten, während sich die RL-Praxis weiterentwickelt.

Wesentliche Verantwortlichkeiten:

• Unabhängige Implementierung des RL-Validierungsprototyps von Resaro, um Instabilität und Verwundbarkeit von Agenten in einer mission-kritischen und komplexen Umgebung aufzudecken.
• Aufbau, Leitung und Mentoring eines globalen, funktionsübergreifenden, leistungsstarken Teams von KI-Forschern und Ingenieuren, während die RL-Praxis skaliert.
• Definition der langfristigen Vision und technischen Roadmap für RL TEVV, mit Fokus auf die Validierung von RL-Algorithmen und gelernten Richtlinien in komplexen Umgebungen mit mission-kritischen Anwendungen in der Systemkontrolle, autonomen Fahrzeugen und Robotik.
• Fortschritt bei Methoden zur Erlernung probabilistischer Belohnungsfunktionen aus menschlichem Feedback (RLHF), um das Verhalten der KI mit den Missionszielen in Einklang zu bringen.
• Partnerschaft mit dem Produktmanagement, um die Produktvision, Kundenprobleme und Marktchancen in eine End-to-End-Lösungsarchitektur und technische Roadmaps zu übersetzen.

Erforderliche Fähigkeiten und Erfahrungen:

• Master / Ph.D. in Robot Reinforcement Learning oder einem eng verwandten Bereich.
• Nachweisliche Erfolge in der Entwicklung und Implementierung neuartiger RL- und ML-Algorithmen, z.B. Forschung oder kommerzielle Implementierung.
• Nachgewiesenes tiefes theoretisches Verständnis und praktische Erfahrung mit dem RL-Rahmenwerk, einschließlich Banditeneinstellung, (in-)finite Horizon-Einstellung, On- und Off-Policy-RL sowie Trust-Region-RL-Ansätzen.
• Erfahrung in Bayesian Machine Learning und probabilistischen Modellen.
• Verständnis des Lebenszyklus von KI/ML/RL und der modernen Ansätze und Einschränkungen beim Testen und Validieren komplexer Anwendungsfälle.
• Starke Fähigkeiten in der Anforderungserhebung, Stakeholder-Kommunikation und Lösungsabgrenzung.

Wünschenswerte Fähigkeiten:

• Erfahrung mit vollständig differenzierbarem Deep Learning für hochinstabile Systeme.
• Erfahrung mit Active Learning und RLHF.
• Hintergrund in der Modellkompression und -pruning für die Bereitstellung großer RL-Modelle auf Edge-Geräten.
• Praktische Erfahrung mit Bayesian Meta-Learning zur Reduzierung der Trainingszeit und des absoluten Fehlers in komplexen Modellen.
• Ein starkes Portfolio an Innovationen, einschließlich mehrerer erfolgreicher Paper-Einreichungen auf Konferenzen wie NeurIPS, ICML, ICLR, IROS, ICRA, CoRL und eine starke Patentgeschichte.
• Erfahrung in der Leitung globaler KI-Initiativen und der Bereitstellung von KI-Lösungen für sowohl B2G (Unbemannte Systeme) als auch B2B (IoT) Sektoren.
• Nachgewiesener Erfolg in der Leitung funktionsübergreifender Teams zur Bereitstellung technischer Lösungen.
• Kenntnis der Bereitstellungseinschränkungen in hochsicheren oder klassifizierten Umgebungen.
• Frühere Kontakte oder Erfahrungen mit der direkten Interaktion mit leitenden Stakeholdern von der Direktion bis zur C-Suite-Ebene.

Warum Resaro beitreten:

• Arbeiten an mission-kritischen KI-Systemen in Verteidigung, Luft- und Raumfahrt sowie öffentlicher Sicherheit.
• Helfen Sie, die Zukunft des KI-Tests und der -Sicherung in realen Umgebungen zu definieren.
• Zusammenarbeit mit einem eng verbundenen Expertenteam, das an der Schnittstelle von KI, Systemtechnik und Politik arbeitet.
• Gestalten Sie die Produktdirection, während Sie nah an der operativen Realität von KI-Einsätzen sind.

Resaro ist ein Arbeitgeber, der Chancengleichheit bietet. Wir respektieren jede Person und unterstützen die vielfältigen Kulturen, Perspektiven, Fähigkeiten und Erfahrungen innerhalb unserer Teams.