Senior ML Engineer (AI Research)

Nebius ist führend in einer neuen Ära des Cloud-Computing, um die globale KI-Wirtschaft zu bedienen. Wir schaffen die Werkzeuge und Ressourcen, die unsere Kunden benötigen, um reale Herausforderungen zu lösen und Branchen zu transformieren, ohne massive Infrastrukturkosten oder die Notwendigkeit, große interne KI/ML-Teams aufzubauen.

Unser Hauptsitz befindet sich in Amsterdam, und Nebius hat eine globale Präsenz mit F&E-Zentren in Europa, Nordamerika und Israel. Das Team von über 800 Mitarbeitern umfasst mehr als 400 hochqualifizierte Ingenieure mit tiefem Fachwissen in der Hardware- und Softwaretechnik sowie ein internes KI-F&E-Team.

Diese Rolle ist für Nebius AI R&D, ein Team, das sich auf angewandte Forschung im Bereich KI konzentriert. Beispiele für angewandte Forschung, die wir kürzlich veröffentlicht haben, umfassen:

• Anwendung von Reinforcement Learning für das Training von Agenten in langfristigen Multi-Turn-Szenarien
• Drastisches Skalieren der Datensammlung zur Unterstützung von Reinforcement Learning für SWE-Agenten
• Aufbau einer dekontaminierten Bewertung für SWE-Agenten, die regelmäßig aktualisiert wird
• Untersuchung, wie testzeitgeführte Suche verwendet werden kann, um leistungsfähigere Agenten zu entwickeln

Wir suchen derzeit nach Senior- und Staff-Level ML-Ingenieuren, die an der Forschung in Bereichen wie:

• Geleitete Suche und Reinforcement Learning für agentische Systeme
• Reinforcement Learning für Denkmodelle
• Web-weite Problemasammlung zum Training von Agenten
• Effiziente Modell-Destillation

Einige Beispiele für Ihre möglichen Verantwortlichkeiten sind:

• Durchführung von Experimenten, um effiziente Methoden zum Training eines großen Sprachmodells auf Interaktionsspuren mit verschiedenen Umgebungen zu finden
• Erforschung von Methoden der geführten Generierung und Suche im Trajektorienraum
• Entwicklung von Möglichkeiten zur Datenmine auf Web-Ebene und Ermittlung effizienter Methoden zur Nutzung dieser Daten im Modell-Post-Training
• Durchführung von Experimenten mit verschiedenen Konfigurationen des Reinforcement Learning in verifizierbaren Domänen
• Erforschung von Methoden zum Training von KI-Agenten bei Aufgaben mit nicht verifizierbaren Belohnungssignalen

Wir erwarten von Ihnen:

• Ein profundes Verständnis der theoretischen Grundlagen des maschinellen Lernens und des Reinforcement Learning
• Tiefe Expertise im modernen Deep Learning für Sprachverarbeitung und -generierung
• Umfangreiche Erfahrung im Training großer Modelle auf mehreren Rechenknoten
• Starke Software-Engineering-Fähigkeiten (wir verwenden hauptsächlich Python)
• Tiefe Erfahrung mit modernen Deep Learning-Frameworks (wir verwenden JAX)
• Starke Kommunikations- und Führungsfähigkeiten
• Erfahrung in der Planung, Durchführung und Analyse von Experimenten im maschinellen Lernen mit angemessener statistischer Strenge
• Fähigkeit, Forschungsfragen zu formulieren, Experimente zu entwerfen, um Hypothesen zu testen, und sinnvolle Schlussfolgerungen aus den Ergebnissen zu ziehen
• Fähigkeit, Forschungsergebnisse klar zu dokumentieren und zu technischen Veröffentlichungen oder Berichten beizutragen

Wünschenswert:

• Erfahrung mit Deep Reinforcement Learning für LLMs, einschließlich Techniken wie Reward Modeling, DPO, PPO usw.
• Vertrautheit mit wichtigen Ideen im LLM-Bereich, wie RoPE, ZeRO/FSDP, Flash Attention, Quantisierung
• Abschluss in Informatik, Künstlicher Intelligenz, Datenwissenschaft oder einem verwandten Bereich; Master oder PhD bevorzugt
• Nachweisliche Erfolge beim Aufbau und der Bereitstellung von Produkten (nicht unbedingt ML-bezogen) in einem dynamischen, startup-ähnlichen Umfeld
• Erfahrung in der Entwicklung komplexer Systeme, wie z.B. große verteilte Datenverarbeitungssysteme oder hochbelastete Webdienste
• Open-Source-Projekte, die Ihr Ingenieurgeschick demonstrieren
• Exzellente Englischkenntnisse sowie überlegene Schreib-, Artikulations- und Kommunikationsfähigkeiten
• Beherrschung zeitgemäßer Software-Engineering-Ansätze, einschließlich CI/CD, Versionskontrolle und Unit-Tests

Was wir bieten:

• Wettbewerbsfähiges Gehalt und umfassendes Leistungspaket.
• Chancen für berufliches Wachstum innerhalb von Nebius.
• Flexible Arbeitsbedingungen.
• Ein dynamisches und kollaboratives Arbeitsumfeld, das Initiative und Innovation schätzt.

Wir wachsen und erweitern unsere Produkte jeden Tag. Wenn Sie bereit für die Herausforderung sind und sich für KI und ML genauso begeistern wie wir, dann schließen Sie sich uns an!