Senior AI Engineer (f/m/d) - Remote in Germany

Die meisten KI-Teams sprechen über Evaluierung. Bei Synera übernehmen Sie dies – von Anfang bis Ende, in der Produktion, für zwei echte agentische Produkte, die von Unternehmen wie BMW, Airbus und NASA genutzt werden.

WAS SIE TUN WERDEN

Sie werden dem Agentic Ants-Team als unser zweiter nativer KI-Ingenieur beitreten. Sie werden unsere agentischen Systeme zusammen mit dem Rest des Teams aufbauen und erweitern – neue Tools, Unteragenten, Prompt-Iterationen – und das Evaluierungsframework mitverantworten, das jede Änderung steuert: goldene Datensätze, LLM-as-Judge-Pipelines, Regressionstests, Produktions-Trace-Mining. Es geht nicht darum, Punkte in ein Notizbuch einzufügen – es geht darum, Agenten zu versenden, denen das Team vertrauen kann, und dies zu beweisen.

Sie werden sowohl an Synera MAS als auch an Synera Assistant arbeiten und sich um Zuverlässigkeitsprobleme (Fehlerbehandlung, Wiederholungen) kümmern, sobald sie in Ihrer Arbeit auftreten. In Zusammenarbeit mit Ruben und dem breiteren Ingenieurteam werden Sie auch dem Team helfen, tiefergehende Einblicke in Kundendaten zu gewinnen.

Ein Beispiel für eine Woche bei Synera:

• Montag: Sprintplanung mit dem Agentic Ants-Team starten, Langfuse-Traces vom Wochenende überprüfen und neue Fehlerquellen markieren, die es wert sind, priorisiert zu werden.
• Dienstag: An dem goldenen Datensatz für die Supervisor-Routing-Oberfläche arbeiten – Beispiele kuratieren, den Satz versionieren und Evaluatoren mit Ahmed schreiben.
• Mittwoch: An einem teamübergreifenden Sync mit QA und Produkt teilnehmen, um sich auf die neue Evaluierungsabdeckung für ein bevorstehendes Agenten-Feature abzustimmen, und dann eine CI-Integration vorantreiben, damit Evaluierungsregressionen den nächsten PR blockieren.
• Donnerstag: Mit den KI- und Software-Ingenieuren zusammenarbeiten, um unser agentisches System zu erweitern – ein neues Tool, eine Routing-Anpassung oder eine Prompt-Iteration – und dann die Evaluierung schreiben, die die Änderung vor dem Versand steuert.
• Freitag: Eine kalibrierte LLM-as-Judge-Ausgabe neben menschlichen Labels überprüfen, das Bewertungsraster verfeinern und die Ergebnisse in der Ingenieursbesprechung teilen.

In 6 Monaten:

Das Evaluierungsframework ist live mit goldenen Datensätzen über mehrere Agentenoberflächen, CI-Gates blockieren bei Regressionen, und das Team vertraut tatsächlich den Ergebnissen. Sie haben mehrere bedeutende Änderungen an den Agentengraphen versendet – neue Tools, Unteragenten oder Routing-Verbesserungen – die in der Produktion messbar besser sind.

In 12 Monaten:

Online-Evaluierung ist zur Gewohnheit geworden – Produktions-Trace fließen kontinuierlich zurück in Datensätze, und der Verbesserungszyklus läuft ohne manuelle Intervention. Sie sind Mitverantwortlicher für mindestens eine Agentenoberfläche im Team und sind zur Anlaufstelle für Evaluierungsmethodik bei Synera geworden. Diese Kombination hat die Produktqualität messbar verbessert.

WAS IST FÜR SIE DRIN?

Wir glauben an transparente Gespräche über Vergütung von Anfang an. Für diese Rolle liegen unsere geplanten Gehaltsbereiche bei:

Erfahrenes Niveau: 77.000 - 97.000 EUR jährlich

Wir bestimmen das Niveau, für das wir Sie einstellen, basierend auf Ihrer Erfahrung, dem Umfang der Verantwortlichkeiten, die Sie übernehmen werden, und dem Einfluss, den Sie ausüben können. Während wir normalerweise innerhalb dieser Bänder einstellen, sind wir offen für etwas Flexibilität für Kandidaten, die außergewöhnlichen Wert für die Rolle bringen.

Hier ist, was wir über das Gehalt hinaus anbieten:

• Flexibles Arbeiten: Sie entscheiden, wann und wo Sie arbeiten (solange Sie einen Wohnsitz in Deutschland haben).
• Flexible Feiertage: Tauschen Sie freie Tage gemäß Ihren Werten und Überzeugungen!
• Unterstützung beim Homeoffice-Setup + Zugang zu unserem Büro in Bremen.
• Persönliches Entwicklungsbudget von 2.000 €, um an Konferenzen und Schulungen teilzunehmen oder interessante Bücher zu kaufen, um sich in einem Bereich Ihrer Wahl zu verbessern.
• Wir zählen Ihre Urlaubstage nicht, da wir allen unseren Teammitgliedern vertrauen, dass sie entscheiden, was für sie und das Unternehmen am besten ist.
• Bevorzugen Sie zwei Räder statt vier? Wir haben Sie mit JobRad abgedeckt.
• Um Ihr persönliches und berufliches Wohlbefinden zu unterstützen, bieten wir Unternehmensfitness mit Wellpass und eine Plattform für psychische Gesundheit namens nilo.
• Regelmäßige Teamevents, virtuelle Kaffeepausen und spontane Afterworks. Wir kommen auch als ganzes Unternehmen zweimal im Jahr für 2-3 Tage Off-Sites zusammen!

WAS SIE ZUM ERFOLG BRAUCHEN

Selbst wenn Sie diese Kriterien nicht perfekt erfüllen, aber glauben, dass Sie viel für die Rolle mitbringen können, ermutigen wir Sie, sich zu bewerben. Wir wissen, dass es schwierig ist, aber bitte denken Sie daran, dass Sie nicht alle aufgeführten Anforderungen genau erfüllen müssen, um für diese Rolle in Betracht gezogen zu werden.

Sie identifizieren sich mit den Kernwerten von Synera – sie sind zentral für unsere Arbeitsweise, und wir werden sie gemeinsam in Ihrem ersten Interview erkunden.

Sie haben Agentengraphen in der Produktion mit LangGraph oder einem Äquivalent entworfen und versendet – Supervisor-/Unteragentenmuster, Tool-Design, Prompt-Iteration.

Sie haben an einer LLM-Evaluierungspipeline gebaut oder bedeutend dazu beigetragen – LLM-as-Judge-Design, Kalibrierung gegen menschliche Labels, Datensatzversionierung und die statistische Argumentation dahinter (CIs, Stichprobengrößen, falsch-positive Ergebnisse).

Sie schreiben produktionsgerechten Python-Code (FastAPI, PostgreSQL).

Sie haben mit mindestens zwei der folgenden Technologien gearbeitet: Anthropic, OpenAI/Azure, Bedrock oder Vertex AI.

Sie sind mit Langfuse, LangSmith oder ähnlichen Tracing-Tools vertraut.

Sie gehen mit Zuverlässigkeit um, wenn sie in Ihrer Arbeit auftaucht – Wiederholungen, Fehlerbehandlung, sanfte Degradierung. SLO-Denken ist ein Plus.

Sie kommunizieren klar und widersprechen, wenn Sie anderer Meinung sind.

P.S. Synera ist ein Ort, an dem jeder wachsen kann. Egal, wie Sie sich identifizieren und welchen Hintergrund Sie mitbringen, bewerben Sie sich bitte, wenn dies eine Rolle ist, die Sie begeistert, jeden Tag zur Arbeit zu kommen, und seien Sie bereit, uns zu erzählen, wie Ihre Perspektive etwas Einzigartiges und Wertvolles in unser Agentic Ants-Team bringen wird.