Senior Data Scientist, Reinforcement Learning

Resaro entwickelt fortschrittliche KI-Testsoftware, um Organisationen dabei zu helfen, ihre kritischsten KI-Systeme zu überprüfen, zu validieren und zu vertrauen – von Computer Vision über generative KI bis hin zu autonomen Systemen. Unsere Mission ist es, sicherzustellen, dass KI-Technologien, die in realen, risikobehafteten Umgebungen eingesetzt werden, robust, erklärbar und sicher sind. Wir arbeiten eng mit unseren Kunden durch eingebettete Lieferteams zusammen, die vor Ort oder in enger Zusammenarbeit tätig sind. Diese Teams passen Lösungen an spezifische Missionsbedürfnisse an und helfen Organisationen – insbesondere im Bereich der öffentlichen Sicherheit und nationalen Sicherheit – die Leistung ihrer KI-gestützten Systeme zu bewerten und zu verbessern.

Über die Rolle: Als Senior Expert Reinforcement Learning sind Sie der Hauptarchitekt unserer KI-Test-, Evaluierungs-, Verifizierungs- und Validierungs (TEVV)-Produktreihe für Reinforcement-Learning-Systeme. Sie leiten die Entwicklung von Next-Generation-KI-Test- und Sicherungsrahmen mit Anwendungen in autonomem Fahren und Robotik. Ihre Mission ist es, unsere Fähigkeiten im Bereich Reinforcement Learning zu skalieren, um sicherzustellen, dass autonome Agenten im Feld sicher, robust und erklärbar sind.

Hauptverantwortlichkeiten

• Unabhängige Implementierung des RL-Validierungsprototyps von Resaro, um Instabilität und Verwundbarkeit von Agenten in einer mission-kritischen und komplexen Umgebung aufzudecken.
• Leitung, Skalierung und Mentoring eines globalen, funktionsübergreifenden, leistungsstarken Teams von KI-Forschern und Ingenieuren, basierend auf Erfahrung in der Steuerung von Organisationen mit über 30 Experten.
• Definition der langfristigen Vision und technischen Roadmap für RL TEVV, mit Fokus auf die Validierung von RL-Algorithmen und gelernten Richtlinien in komplexen Umgebungen mit mission-kritischen Anwendungen in der Systemkontrolle, autonomen Fahrzeugen und Robotik.
• Fortschritt von Methoden zur Erlernung probabilistischer Belohnungsfunktionen aus menschlichem Feedback (RLHF), um das Verhalten von KI mit den Missionszielen in Einklang zu bringen.
• Partnerschaft mit dem Produktmanagement zur Übersetzung der Produktvision, Kundenprobleme und Marktchancen in eine End-to-End-Lösungsarchitektur und technische Roadmaps, die eine produktorientierte Wachstumsstrategie unterstützen.

Must-Have Fähigkeiten und Erfahrungen

• Master / Ph.D. in Robot Reinforcement Learning oder einem eng verwandten Bereich.
• Nachweisliche Erfolge in der Entwicklung und Implementierung neuartiger RL- und ML-Algorithmen, z.B. Forschung oder kommerzielle Implementierung.
• Nachgewiesenes tiefes theoretisches Verständnis und praktische Erfahrung mit dem RL-Rahmenwerk, einschließlich Banditeneinstellungen, (in-)finite Horizon-Einstellungen, on- und off-policy RL und Trust-Region-RL-Ansätzen.
• Erfahrung in Bayesian Machine Learning und probabilistischen Modellen.
• Verständnis des AI/ML/RL-Lebenszyklus und der modernen Ansätze und Einschränkungen beim Testen und Validieren komplexer Anwendungsfälle.
• Starke Fähigkeiten in der Anforderungserhebung, Stakeholder-Kommunikation und Lösungsabgrenzung.

Nice-to-Have

• Erfahrung mit vollständig differenzierbarem Deep Learning für hochinstabile Systeme.
• Erfahrung mit Active Learning und RLHF.
• Hintergrund in der Modellkompression und -pruning für die Bereitstellung großer RL-Modelle auf Edge-Geräten.
• Praktische Erfahrung mit Bayesian Meta-Learning zur Reduzierung der Trainingszeit und des absoluten Fehlers in komplexen Modellen.
• Ein starkes Portfolio an Innovationen, einschließlich mehrerer erfolgreicher Paper-Einreichungen auf Konferenzen wie NeurIPS, ICML, ICLR, IROS, ICRA, CoRL und eine umfangreiche Patentgeschichte (z.B. 17+ Patente).
• Erfahrung in der Leitung globaler KI-Initiativen und der Bereitstellung von KI-Lösungen für sowohl B2G (Unbemannte Systeme) als auch B2B (IoT) Sektoren.
• Nachgewiesener Erfolg in der Leitung funktionsübergreifender Teams zur Bereitstellung technischer Lösungen.
• Kenntnis der Bereitstellungseinschränkungen in hochsicheren oder klassifizierten Umgebungen.
• Frühere Kontakte oder Erfahrungen mit der direkten Interaktion mit leitenden Stakeholdern von der Direktion bis zur C-Suite-Ebene.
• Frühere Sicherheitsfreigabe auf Regierungsebene CONFIDENTIAL und höher.

Warum Resaro beitreten

• Arbeiten Sie an mission-kritischen KI-Systemen in Verteidigung, Luft- und Raumfahrt sowie öffentlicher Sicherheit.
• Helfen Sie, die Zukunft des KI-Tests und der Sicherstellung in realen Umgebungen zu definieren.
• Zusammenarbeit mit einem eng verbundenen Expertenteam, das an der Schnittstelle von KI, Systemtechnik und Politik arbeitet.
• Gestalten Sie die Produktdirection, während Sie nah an der operativen Realität von KI-Einsätzen sind.

Resaro ist ein Arbeitgeber, der Chancengleichheit bietet. Wir respektieren jede Person und unterstützen die vielfältigen Kulturen, Perspektiven, Fähigkeiten und Erfahrungen innerhalb unserer Teams.