Staff/Senior AI Engineer, AI for Code

Bei JetBrains entwickeln wir Entwicklerwerkzeuge, die von Millionen von Ingenieuren genutzt werden. Das AI for Code-Team arbeitet an der nächsten Generation von Codierungsagenten und agentischen Workflows: Systeme, die Codebasen verstehen, mehrstufige Aufgaben planen und ausführen, mit Entwicklern zusammenarbeiten und zuverlässige Ergebnisse in realen Entwicklungsumgebungen liefern können. Wir suchen einen Staff/Senior AI Engineer, der das Team unterstützt. Diese Rolle ist für jemanden, der unsere internen Codierungsmodelle, wie Mellum2, sowie offene Modelle in produktionsbereite Codierungsagenten für unsere Nutzer umwandeln kann.

Was Sie tun werden:

• Produktionsbereite Codierungsagenten und agentische Workflows für reale Entwickleraufgaben innerhalb der JetBrains-Produkte erstellen.
• Vielversprechende Modellfähigkeiten in zuverlässiges Produktverhalten umwandeln durch Prompt-Design, Kontextkonstruktion, Feinabstimmung, Instruktionsanpassung oder andere geeignete Nachbearbeitungstechniken.
• Den Agentenloop selbst entwerfen und verbessern, einschließlich Werkzeugnutzung, Ausführungsstrategie, Sicherheitsvorkehrungen und Qualität der Aufgabenerfüllung.
• Bewertungssuiten und Qualitätsinfrastruktur für das Verhalten von Agenten erstellen, einschließlich Online- und Offline-Bewertungen, Regressionstests, Fehleranalysen und Freigabekriterien.
• Feedbackschleifen aus der realen Nutzung aufbauen, indem Protokolle, Nutzersignale und Grenzfälle verwendet werden, um Daten, Bewertungen und das Verhalten von Agenten zu verbessern.
• Mit sowohl gehosteten Frontier-APIs als auch selbstgehosteten oder offenen Modellen arbeiten und pragmatische Entscheidungen darüber treffen, wo jedes Modell basierend auf Fähigkeit, Latenz, Zuverlässigkeit, Datenschutz und Kosten gehört.
• Eng mit Produktmanagern, Softwareingenieuren, ML-Ingenieuren und Forschern zusammenarbeiten, um Funktionen von Anfang bis Ende zu liefern.
• Die technische Richtung für zukünftige Arbeiten definieren, insbesondere in unklaren Bereichen, in denen wir starkes Urteilsvermögen benötigen.

Was wir suchen:

• Starke Grundlagen in der Softwareentwicklung und eine Erfolgsbilanz beim Versand komplexer Systeme in die Produktion.
• Praktische Erfahrung im Aufbau von LLM-gestützten Produkten, Codierungsagenten oder anderen KI-Systemen.
• Erfahrung in der Verbesserung des Modellverhaltens durch systematische Iteration.
• Praktische Erfahrung mit Bewertung und Benchmarking für LLM-Systeme.
• Erfahrung im Umgang mit verrauschten realen Signalen.
• Gutes Urteilsvermögen über Kompromisse zwischen Modellqualität, Latenz, Zuverlässigkeit, Datenschutz und Kosten.
• Vertrauen im Umgang mit Unklarheiten und Übernahme von Verantwortung über mehrere Iterationen.
• Starke Kommunikationsfähigkeiten und die Fähigkeit, technische und Produktentscheidungen in Einklang zu bringen.

Was Erfolg im ersten Jahr aussieht:

• Sie liefern eine oder mehrere Agentenfähigkeiten, auf die sich die Nutzer für bedeutungsvolle Arbeit verlassen können.
• Sie etablieren eine bessere Bewertungsabdeckung und klarere Freigabekriterien für das Verhalten von Agenten.
• Sie helfen dem Team, einen wiederholbaren Prozess vom Konzept zur gelieferten Fähigkeit aufzubauen.

Warum Sie sich uns anschließen sollten:

• Sie helfen dabei, zu definieren, wie praktische, vertrauenswürdige KI für die Softwareentwicklung in echten Produkten aussieht.
• Sie arbeiten an herausfordernden Problemen an der Grenze zwischen Modellfähigkeit und Produktrealität.

Und:

• Starkes Grundgehalt.
• Flexible Arbeitsorte.
• Remote-Arbeit.
• Zusätzliche Freizeit.
• Krankenversicherungszuschuss.
• Lern- und Entwicklungsmöglichkeiten.
• Umzugshilfe.
• Sprachkurse.
• Verpflegung.
• Unterstützung für psychische Gesundheit.
• Sportleistungen.
• Interne Veranstaltungen.

*Einige Vorteile können je nach Standort variieren.

Wir sind ein Arbeitgeber, der Chancengleichheit bietet. Wir wissen, dass großartige Ideen von jedem, überall kommen können. Deshalb bemühen wir uns, einen offenen und integrativen Arbeitsplatz zu schaffen, der jeden willkommen heißt, unabhängig von Hintergrund, Identität, Religion, Alter, Zugangsbedürfnissen oder Orientierung.